BOINC et stratégies, l'histoire de ma vie

[[CSF] Christian Carquillat]

Bonjour à tous 

Je suis en pleine remise en question depuis un certain moment, et le fait de suivre un calendrier sur des machines qui sont "indomptables" commence à m'épuiser au plus haut point

Comme les habitués de ce forum le savent, mon quotidien est un calcul énergétique permanent, que ce soit en été comme en hiver, essentiellement lié à un énième report de remise en état au domicile

Je ne suis pas encore trop à la ramasse niveau équipement informatique même si je suis loin d'avoir les dernières bécanes en date, cependant il est compliqué de basculer à temps pour chaque stratégie, vu que chaque machine se démarque un peu d'une autre en fonction des besoins
Les projets qui envoient comme par hasard des WU à rallonge juste avant que je décide de planifier un petit cache et des travaux courts dans le but d'initier une coupure en douceur, ça me prend la tête au plus au point

En ce moment je suis loin d'avoir froid et certaines machines sont remplies de calculs en cours qui tournent depuis quatre jours, elles auraient déjà normalement été mises hors secteur

Une partie de mon parc ne peut pas être mis en veille, ni en veille prolongée, et de toute façon, certaines deadlines m'en empêcheraient

Pendant ce temps là, je ne sais pas si je serai crédité sur l'attente, mais je ne peux que constater un retard de progression notable sur chaque évènement (sprint/marathon/etc...) par rapport à ce que je pourrai idéalement fournir avec ce qui n'est pas branché

Ce n'est pas un scoop, je ne souhaite plus dépendre d'un calendrier complexe et de résultats différés sur de courts laps de temps, et même si mon parc ne me permet pas de bascule immédiate à la volée, il serait trop étendu à administrer dans des conditions de vie un peu plus normales

L'expérience Formula Boinc fût très enrichissante et prenante, mais c'est en essayant d'être partout que l'on finit par être nulle part
Je vais donc contribuer tant bien que mal en fermant les vannes et évitant la surproduction pendant le redoux, quitte à devoir laisser tomber quelques objectifs en si bon chemin

L'avenir sera basé sur une contribution en fonction de mes souhaits personnels, peut-être que je me prendrai au jeu de temps en temps sur le projet du mois ou un éventuel raid

[erik]

Celà fait un moment que je ne crunche que si j'ai besoin de chauffage, sinon financièrement c'était intenable.
Sinon je ne me casse plus la tête. Je ne crunche plus que sur Einstein depuis qu'Universe et SETI ont mourru. Il m'arrive de cruncher d'autres projets astro.
Pour ce qui de est de Radioactive, ce projet fonctionnait avec un raspi qui n'a pas supporté sa dernière mise à jour à cause d'un problème de carte SD. Même si je changeait la carte pour une plus grosse, celà ne résoudrait pas le problème vu que le projet ne prend plus de nouveaux hôtes (localisation GPS impossible).
Je fais toujours les RAID de l'AF mais je ne m'éparpille pas, je fais mes projets astro "historiques".

Pour ce qui est du chauffage, je ne l'ai pour le moment pas remis, mon bi-xeon qui consomme 800W à pleine charge sur les calculs mathématiques du RAID plus un I7 qui consomme 100W suffisent pour une température d'environ 15°C.

Pour ce qui est du compteur électrique, j'ai 6kW disponibles et ça me suffit.

Et pour finir avec une note positive, il fait un temps superbe 

[JeromeC]

Mais oui les amis ! Erik a tout à fait raison, faut rester "raisonnable" ! boinc doit rester un hobby, pas une prise de tête ni un risque financier démesuré !

Christian depuis que tu participes activement sur le forum on a bien vu que tu es un vrai passionné qui va bien plus au fond des choses (techniques) que la grande majorité des membres de l'AF (il y a ptet quelques autres fêlés comme toi va savoir ), mais oui faut lever le pied avant de devenir complètement zinzin !!

Moi ça fait bien longtemps (depuis le début en fait) que j'ai fait mon choix : je ne boinc que sur ma machine perso, que certes j'achète "un peu dodue" (à cause de boinc bien évidemment) mais que j'essaye de garder moult années (mon précédent mac a bien fonctionné 10 belles années), et je m'autorise un petit VPS OVH à 12 balles par mois (qui était surtout pour avoir un linux sous le coude sans faire de VM dans le mac), et quand c'est possible ma machine de bureau (au pris de moultes difficultés / restriction, maintenant elle ne peut plus faire que du yafu, en espérant qu'ils ne migrent jamais en https !) et voilà c'est tout.

J'ai eu parfois des petites tentatives à débordement, genre Shadow quand on arrivait à boincer en GPU avec, les expérimentations rigolotes avec Google machin pour l'IA, des VM à pas cher chez Joe aux US, certaines lointaines époques où j'arrivais à coloniser un peu les PC de bureau autour de moi (quand y'avait des PC fixes partout qui dormaient et que les cyber sécurité ne bloquaient pas tout dans tous les sens), mais au final je suis toujours revenu à l'invariant sus-cité.

Boinc doit pas empêcher de dormir ni faire transpirer à grosses gouttes et encore moins se relever toutes les heures la nuit pour régler le bateau comme les navigateurs du Vendée Globe (force à eux !).

Chacun fait selon ses moyens et venir partager ses expériences ici (en ce qui me concerne) et tout aussi important que le crunch en lui même

[[CSF] Christian Carquillat]

Suite au grand ménage fait sur FB, l'envie de me retaper la bourre sort doucement de son sommeil

Remercions infiniment notre super Seb de m'avoir redonné une lueur d'espoir    

[zOU]

je pense que tu te prends trop la tete ;-)
Pas de super micro management possible sur Boinc vu les differences entre les UT des projets.
Donc les pertes sont inevitables.

Ca se limite avec la gestion de parc, et les fonctions de type;
- ne plus recevoir de travail + abandonner les UT non commencées (elles seront redistribuees par le projet) = ca finit ce qui est commence et basta

[JeromeC]

Y'a toujours eu des adeptes du micro-management

Mais là on est plutôt dans le nano-management en fait

[[CSF] Christian Carquillat]

J'ai sept Theory Simulaion sur le serveur Ubuntu, qui sont à un jour de la deadline
Elles tournent depuis quasi une semaine, et comme je n'ai pas d'historique de crédits sur elles, je veux vraiment savoir si ça vaudrait le coup que je me penche dessus ou non, en espérant qu'elles ne finissent pas en erreur

C'est aussi une volonté personnelle de me pencher sur ce qui n'intéresse pas grand monde, le matériel en ma possession autorise un peu plus facilement les choses douteuses et permet de combler d'éventuelles "lacunes" de l'AF sur ces projets, comparables à de l'entêtement genre DYFL sur des GPU inférieurs à des A2000 etc

Beaucoup d'utilisateurs contribuant sur leur machine de tous les jours, ne peuvent pas se permettre de saturer la bécane niveau RAM, ni même s'embringuer dans des trucs façon P2 sans checkpoint car des extinctions régulières sont récurrentes. Dans mon cas, si une permutation est prévue (ou en approche de sprint) je ferme progressivement les vannes sur les projets à rallonge, et je bascule sur un cache réduit en Amicable, ODLK, etc, sauf que j'ai toujours un imprévu (ou un objectif) incompatible avec la permutation quasi immédiate de machines

La quasi certitude que je récupère ma première place sur Yoyo au FB est en grande partie de ce qui perturbe mes plans car j'avais trop laissé de côté le projet, mais il y a aussi eu des achats récents qui m'ont mis dedans à force de piocher dans des machines "bouclées" et leur retirer de la RAM pour basculer sur une autre, etc

Une fois la cohérence revenue dans la répartition des pièces de machines susceptibles de tourner H24 en hiver, il me faudra assimiler et désigner un projet unique pour chaque station de travail, sans tenter des trucs à rallonge car j'ai supposé avoir le temps d'essayer des choses qui ont pris une différente tournure


Pour faire un peu plus "court" je constate que mon parc n'est clairement pas taillé pour des sprints sur PG en GPU par exemple (mes 3070 foirent et je n'ai rien de plus gros qu'une seule 3070Ti qui tourne encore bien trop rarement à ce jour) alors au lieu d'essayer de faire le malin sur ce point, j'ai meilleur temps d'essayer de comprendre (sans oublier) ce que je maitrise


La saison veut aussi que le postérieur soit anormalement ventousé dans un fauteuil agissant comme somnifère, avec un laptop en guise de bouillotte, qui me sert aux iLo, TSE, mais rien de plus car je suis trop loin du KVM 

[erik]

Pour faire un peu plus "court" je constate que mon parc n'est clairement pas taillé pour des sprints sur PG en GPU par exemple (mes 3070 foirent et je n'ai rien de plus gros qu'une seule 3070Ti qui tourne encore bien trop rarement à ce jour) alors au lieu d'essayer de faire le malin sur ce point, j'ai meilleur temps d'essayer de comprendre (sans oublier) ce que je maitrise

Je ne pense pas que ce soit un problème de carte graphique. Je fais tourner des DYFL sur des 1080Ti sans aucun problème. Par contre en regardant tes résultats, j'ai relevé des erreurs au niveau OpenCL comme beaucoup de mes wingmen. Je ne suis pas un spécialiste mais tu as peut-être un problème de pilote.

[[CSF] Christian Carquillat]

Pour avoir eu plusieurs "marques" différentes d'un même modèle de carte graphique, j'ai souvent constaté que les versions OC ont de très grandes chances de foirer, même PrimeGrid déconseille de les utiliser

Je pourrais très bien chercher un compromis polyvalent via Afterburner si mon souhait était de persévérer sur ce projet, mais pour quelques WU de temps en temps, cela ne justifierait pas de trop m'acharner, car tous les autres projets tiennent, même SRBase

[JeromeC]

J'ai sept Theory Simulaion sur le serveur Ubuntu, qui sont à un jour de la deadline
Elles tournent depuis quasi une semaine, et comme je n'ai pas d'historique de crédits sur elles, je veux vraiment savoir si ça vaudrait le coup que je me penche dessus ou non, en espérant qu'elles ne finissent pas en erreur

Sur le topic LHC (peut-être / il me semble) où on a parlé des applis à base de VM/VB il y a peu, j'ai pas pensé à évoquer le cas des "native" de LHC : ils ont pondu il y a plusieurs années des versions (linux only) "native" pour Theory simulation ("300.08 (native_theory)") et Atlas ("3.01 (native_mt)"), qui comme leur nom l'indique (un peu) n'utilisent pas de VM/VB du tout.

Cependant

- elles ne fonctionnent pas de manière native (d'où le nom ?  ) et il faut bricoler sous linux pour y arriver (ici, ici aussi, là et je pense que y'a un ou plusieurs topic ici sur le fofo à ce sujet)
- le serveur status ne dit pas si les tâches theory ou atlas dispo sont des VB/VM ou des natives, j'ai pas cherché sur le forum si ça en parle)

Mais j'en avais fait pas mal à l'époque dans mon petit VPS OVH debian, où y'avait pas moyen de mettre un VB ni des ressources adaptées à des VM balaises, et ça marchait bien (quand on arrivait à configurer le bousin).

Je dis ça je dis rien, mais "7 theory simulation qui tournent depuis une semaine" (je suppose donc "à base de VM/VB") t'es certain qu'elles tournent vraiment encore ? la cohabitation de plusieurs tâches à base de VM/VB (chez moi) se terminait souvent par des tâches qui ne tournaient plus du tout, avec un statut boinc "spécial" qu'on ne voit pas forcément sous BM (mais qu'on peut voir dans BoincTasks ou en boinccmd je crois) du genre "waiting for hypermachin xxx" et parfois la tâche se relance, parfois jamais.

[[CSF] Christian Carquillat]

Elles avancent toutes, aucun souci à ce niveau
Et je ne suis jamais passé par les "bidouilles à rallonge" donc en gros j'ai mis VB, BM, et basta roule ma poule

Je n'aime pas trop jeter du travail qui n'a pas commencé, mais quand des WU tournent depuis un bon moment, il faudrait me payer pour les interrompre

[JeromeC]

Tu constate une consommation de CPU réelle sur chacune des tâches ? tu es certain d'un avancement ?

A part CPDN dans le temps (ou les tâches longues de DNA) (des DYFL de PG en GPU), je n'ai aucun souvenir de tâches CPU de LHC qui puissent durer aussi longtemps... mais bon ça fait fort longtemps que j'en ai plus fait.

[[CSF] Christian Carquillat]

Oui, ça me bouffe réellement du proco et le pourcentage avance régulièrement, faut dire qu'à seulement 2GHz je ne vais pas la torcher d'un claquement de doigts

[JeromeC]

Ah ok, mais une semaine ça me paraît dingo. Ou alors c'est de très vieux CPUs ?

[[CSF] Christian Carquillat]

Pas plus vieux que ceux que j'utilise actuellement, mais comme j'ai coupé le serveur deux jours pour le sprint de Willy, que je fais plein de TS à la fois sans connaitre le rythme de croisière sur les 2698v4, et que je me suis emmêlé dans les cordons d'alim un jour plus tard, cela n'aide pas non plus

EDIT: j'ai un hyper-threading en route sur cette bécane, ça allait super bien quand je recevais les Atlas et CMS