outil d'analyse du pending WCG

[Maurice Goulois]

Farpait ! 


Et merci encore 

[JeromeC]

Pas de gentil modo dans les parages... dommaaaaaage...

[JeromeC]

Super Antares merci !! mais... pourquoi le reste de l'autre sujet a disparu / vide ???

[Antares]

J'ai du faire une bourde...Les admins svp, vous pouvez réparer?
Pourtant je n'ai fais que séparer...

[JeromeC]

Ah mais non y'a un 2ème topic de même nom qui lui n'est pas marqué comme "déplacé" : https://forum.boinc-af.org/index.php/topic,3797.2950.html

Je crois que tout est OK !

[Antares]

Jéjé arrête de me faire peu, à mon age...

[JeromeC]

Ça maintient les sens éveillés

[Antares]

 

[Maurice Goulois]

J'aime vraiment bien cet outil  cependant, c'est parfait pour OPN mais il a cessé d'indiquer la ligne "projection" pour ARP depuis quelques jours (vraiment pas grave, c'est facile à faire de tête avec ce projet  )

[[AF>Libristes] ElGuillermo]

Hello et merci

Le truc, c'est que la ligne "Projection" ne s'affiche que s'il y a possibilité de projeter...
En gros : s'il n'y a aucune WU en pending ou aucune WU en cours de calcul : il n'y a rien à espérer

Cependant : un cas particulier :

Les calculs projetés se basent sur les données de chaque machine de manière indépendante.
Cela pour éviter de se baser sur la puissance d'un petit CPU pour estimer celle d'un gros monstre.
Or, on ne dispose que de données précises "récentes" (une dizaine de jours à peu près), la moyenne "archivée" mélangeant les résultats et les temps de toutes la machines qui ont travaillé sur le projet.

Donc :
On peut avoir des WU en cours de calcul sur une machine, mais pas de projection, parce que le temps de calcul n'est pas connu sur cette machine.
Soit cette machine n'a jamais calculé sur ce projet, soit elle a déjà calculé, mais il y a plus de 10 jours... Le système a "oublié" ses données.
-> il faut attendre qu'une WU soit calculée et renvoyée au serveur pour avoir un temp de calcul et, donc, une projection du temps total pour toutes les WUs en cours de calcul.

... Je peux toujours ajouter une estimation par rapport aux données globales du projet, mais cela voudra dire que si on a toujours calculé avec un petit Pentium 4, la projection se basera sur sa puissance pour estimer le temps de complétion des WUs en cours. Si, cette fois, on est passé sur un énorme AMD Threadripper (ou un Intel I9, hein) : la projection sera complètement fausse

[JeromeC]

Et une fausse projection, ça peut être une vrai connerie

[Maurice Goulois]

Je me doutais un peu de ça mais t'emmerde pas avec sauf si tu en as envie ou besoin arp est assez facile à projeter avec un cerveau normalement fonctionnel

Tu fais gagner du temps, c'est pas rien; à la mimime il faut se farcir la liste des résultats par statut. Pas difficile mais pas fun

[[AF>Libristes] ElGuillermo]

C'est rapide et facile à faire : le script dispose déjà de toutes les données : il n'y a plus qu'à faire appel à elles pour les afficher.

Mais projeter un temps de calcul en s'appuyant sur une moyenne de résultats qui, pour certains, ont plusieurs années et ont donc été calculés sur des ordinateurs dont la puissance n'a rien à voir avec celle dont on dispose aujourd'hui, est... sans lien avec la réalité ?

[Maurice Goulois]

te prends pas la tête. Ça reviendra quand j'aurais fini mon objectif sur OPN et que il n'y aura plus que ARP en cours.

[Fabrice.ltn]

Ouaip, je plussoie, ça fonctionne très bien ton petit outil... c'est top.

[franky82]

Cet outil est toujours génial !
mais je posais une question : OPN1 apparaît mais OPNG (version GPU) est-il pris en charge (comptabilisé) avec OPN1 ou non ?

[[AF>Libristes] ElGuillermo]

Hello. Je t'avoue que je ne m'en suis pas tellement inquiété : le truc "découvre" tout seul les projets... Logiquement, si OPNG est classé différemment d'OPN1, il devrait apparaître... Faudrait que je regarde dans les fichiers d'export ce que ça donne.

[franky82]

J'ai regardé et comparé avec les résultats affichés sur WCG : il semble que les résultats OpenPandemics cumulent OPN1 et OPNG --> même temps de calcul sur WCG et sur ton outil (même si cela affiche OPN1, en face de OpenPandemics) !

[[AF>Libristes] ElGuillermo]

ok. Il y a peut-être moyen de patcher pour différencier les deux, à condition qu'ils soient effectivement diférenciés dans l'export des données. Là, je bosse, mais je peux regarder ça vite fait ce soir.

[[AF>Libristes] ElGuillermo]

OK, je viens de regarder : on peut effectivement différencier les "opng" des "opn1" au sein du même projet, mais le serveur ne comptabilise que le temps CPU et pas le temps GPU Du coup, on se retrouve avec des valeurs marginales, de l'ordre d'une ou deux secondes par WU... Pas forcément très significatif sur le pending

Je vois s'il y a moyen d'afficher une info intéressante ou pas, mais cela suppose que je replonge dans un code assez touffu. Peut-être un "chantier" dans les jours prochains ?

[[AF>Libristes] ElGuillermo]

Bon : j'y suis arrivé !

Pas toujours simple de reprendre un script de 1800 lignes, même (surtout ?) quand c'est le sien
Heureusement, comme ça m'est déjà arrivé par le passé, je me laisse toujours des commentaires pour mon "moi idiot du futur"

A priori, tout est "bon", mais j'ai eu peu d'occasions de tester in vivo : les WUs opng sont rares

[franky82]

Ah oui, OK ! Pour OpenPandemics, pour chaque machine, CPU et GPU ! 
(et les UT OPNG appaissent en face de GPU)