Le Forum de l'Alliance Francophone

Boinc et les projets distribués => Annonces sur Boinc et les projets => Discussion démarrée par: damotbe le 04 April 2018 à 14:26

Titre: [QuChemPedIA] le topic de préparation
Posté par: damotbe le 04 April 2018 à 14:26




Bonjour à tous.  :hello:

Infos utiles.
Pour les plateformes Mac et Windows il est nécessaire d'installer Virtualbox : https://www.virtualbox.org/ (https://www.virtualbox.org/)
                                                                                                        (https://www.virtualbox.org/graphics/vbox_logo2_gradient.png)


Statut :a l’arrêt
URL du projet : https://quchempedia.univ-angers.fr/athome/ (https://quchempedia.univ-angers.fr/athome/)
Application disponible : https://quchempedia.univ-angers.fr/athome/apps.php (https://quchempedia.univ-angers.fr/athome/apps.php)
État du serveur : https://quchempedia.univ-angers.fr/athome/server_status.php (https://quchempedia.univ-angers.fr/athome/server_status.php)
L'alliance francophone : https://quchempedia.univ-angers.fr/athome/team_display.php?teamid=4 (https://quchempedia.univ-angers.fr/athome/team_display.php?teamid=4)
Classement mondial de L'af : https://www.boincstats.com/stats/185/team/list/ (https://www.boincstats.com/stats/185/team/list/)

Je ne sais pas trop où mettre ce sujet. Je vais vous parler ici du projet que j'essaye de mettre en place à l'Université d'Angers : QuChemPedIA et de sa partie Boinc.

TL;DR : Clean Energy Project + Intelligence Artificielle + plateforme ouverte

QuChemPedIA : Quantum Chemistry encycloPEDia + Intelligence Artificielle

Citer
Présentation : Ce projet s’inscrit dans les domaines des sciences des données et de l’intelligence artificielle. L’objectif est de révolutionner le domaine de la chimie quantique et informatique moléculaire. La chimie moléculaire se définit comme l’étude d’entités discrètes (molécules) et correspond à la communauté la plus large de chimistes. Des centaines de millions de molécules sont connues, contenant généralement moins d’une centaine d’atomes et moins d’un millier d’électrons. Les propriétés chimiques de ces molécules dépendent de la position des électrons qui peut être calculée de manière approchée par des méthodes issues de la mécanique quantique. Les différents paramètres de calcul définissent la qualité de la méthode et son coût en temps (de quelques heures à quelques milliers d’heures par molécule). Avec la démocratisation de la puissance de calcul, la chimie informatique est devenue une partie essentielle de la recherche en chimie.
Aujourd’hui, il est impossible pour un humain de prendre en compte les résultats, même restreints aux données les plus importantes, pour les millions de molécules connues. Pour les chimistes, l’ambition de ce projet est de changer radicalement d’approche en utilisant des méthodes d’intelligence artificielle et de fouille de données afin d’explorer plus efficacement l’immense combinatoire de l’espace moléculaire.
Le projet se situe donc à la frontière entre l’apprentissage artificiel quand il s’agit de prédire les propriétés d’une molécule et l’optimisation combinatoire quand nous cherchons à proposer des nouvelles molécules maximisant un ou plusieurs objectifs. La méthodologie envisagée, qui allie apprentissage profond (deep learning) et programmation par contraintes pour générer des molécules, est inédite à notre connaissance et offre des opportunités remarquables. Associer une fonction de coût tout en prévoyant les voies de synthèse permet par exemple de proposer des molécules moins coûteuses pour l’environnement, base de la chimie verte de demain. La recherche de nouveaux matériaux photovoltaïques est d’ailleurs la première des applications que nous envisageons.

Dans un premier temps, le projet Boinc permettra d'alimenter les procédures d'intelligence artificielle en données. Les volontaires calculeront des molécules pour lesquelles il n'existe pas de résultats publiques en chimie quantique. Il est très probable que dans un second temps, les volontaires soient sollicités pour réaliser les calculs nécessaires aux procédures d'exploration de l'espace moléculaire (intelligence artificielle).

Avancement du projet :

Mis a jour par fzs600 le 15 mars 2023.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 04 April 2018 à 14:26
13 Novembre 2019:

Notre premier article scientifique en lien avec le projet est disponible en Open Access et les données en Open Data.
"Dataset’s chemical diversity limits the generalizability of machine learning predictions"
https://jcheminf.biomedcentral.com/articles/10.1186/s13321-019-0391-2?fbclid=IwAR0LtM098-vkv0rJnoSV8Yo5ZbuFu4HXpZKsn3ekTTtA4rM0Sb5_HMSSSwI (https://jcheminf.biomedcentral.com/articles/10.1186/s13321-019-0391-2?fbclid=IwAR0LtM098-vkv0rJnoSV8Yo5ZbuFu4HXpZKsn3ekTTtA4rM0Sb5_HMSSSwI)

Avec une traduction du message de Thomas Cauchy qui explique l'article et les recherches à venir
Citer
Bonjour,

Je suis le chimiste de ce projet. La publication mentionnée par Benoit Da Mota a été écrite lors du lancement du projet boinc. Mais je peux extraire quelques phrases de cet article pour montrer ce que nous avons en tête.. :

"Résumé : L'ensemble de données QM9 est devenu la référence en matière de prédiction par Apprentissage Automatique (ML) pour de nombreuses propriétés chimiques. QM9 est basé sur la GDB, qui est une exploration combinatoire de l'espace chimique. Les prédictions à l'aide du ML ont récemment été publiées avec une précision comparable à celle des calculs de la théorie fonctionnelle de la densité. De tels modèles nécessitent d'être reproduits et généralisés sur des données réelles. PC9, un nouvel ensemble de données équivalents à QM9 (seulement H, C, N, O et F et jusqu'à 9 atomes "lourds") issu du projet PubChemQC est présenté dans cet article. Une étude statistique des distances de liaison et des fonctions chimiques montre que ce nouvel ensemble de données couvre une plus grande diversité chimique. Une régression Kernel Ridge, une régression Elastic Net et le modèle de réseau neuronal fourni par SchNet ont été utilisés sur les deux ensembles de données. La précision globale de la prédiction de l'énergie est plus élevée pour le sous-ensemble QM9. Cependant, un modèle entraîné sur PC9 montre une plus grande capacité à prédire les énergies des autres ensembles de données."

Le jeu de données QM9 contient environ 130 000 petites molécules, alors que PC9 en contient 119 000 (mais a été extrait d'un autre type de calculs). Le problème est que les résultats complets de la QM9 ne sont pas accessibles au public. Ils ont extrait certains résultats de calculs de mécanique quantique coûteux et ont détruit le fichier de données. Nous ne sommes pas satisfaits de PC9 qui est une simple démonstration qu'une plus grande diversité est nécessaire.

Pour le moment, le projet Boinc vise à recalculer les molécules intéressantes de QM9 et PC9 avec le même niveau de calcul cette fois. Tous les résultats seront disponibles sur la base de documents QuChemPedia https://quchempedia.univ-angers.fr lorsque cette plate-forme sera un peu plus robuste (début 2020), à l'image de notre outil de contrôle qualité tel que développé par mon collègue.

Nous ne sommes pas encore entièrement satisfaits de NWChem. Avec le même projet Boinc, Benoit Da Mota et moi-même, utilisons Gaussian (propriétaire) qui est très efficace. Mais Nwchem est open source....
Nous avons calculé environ 130 k sur 200 k grâce à votre aide !
Pour décembre, nous espérons proposer à la communauté de calculer de nouvelles molécules qui n'existent peut-être même pas et ne sont pas stables afin d'aider l'outil d'apprentissage machine à mieux généraliser. Ces nouvelles molécules seront générées par une procédure d'apprentissage automatique (IA).

Si vous avez des questions....
Amicalement
Thomas
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 04 April 2018 à 14:26
réservé
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 04 April 2018 à 15:43
:bounce:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 04 April 2018 à 15:46
 :plusun:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 04 April 2018 à 15:55
ATA prêt :chefouichef:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 04 April 2018 à 16:35
OK damotbe.
Si je peux aider à faire des essais... N'hésite pas.
Tiens-nous au courant.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 04 April 2018 à 16:53
Il serait bien de développer le projet aussi pour android  :kookoo:
Sinon je serais dispo  :hyperbon: :hyperbon: :hyperbon:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Ceclo le 04 April 2018 à 17:13
Partant pour mettre quelques thread à dispo! Le projet me semble très intéressant!  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 04 April 2018 à 17:58
Moi aussi, mais sous windows seulement...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: ousermaatre le 04 April 2018 à 18:10
 :hello: damotbe

Génial, un beau projet francophone!!!!
Tu es bien dans la bonne partie du forum pour ton topic.

Si tu as besoin d'aide ou de place pour inscrire tes informations, on est là.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 04 April 2018 à 18:56
Il serait bien de développer le projet aussi pour android  :kookoo:
Sinon je serais dispo  :hyperbon: :hyperbon: :hyperbon:

Si quelqu'un sait comment s'y prendre et peut nous aider, carrément ! (comme pour Windows et Mac)
Pour l'instant, on va surtout tourner avec Linux et les distros compatibles.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 04 April 2018 à 19:08
A mettre sur le portail...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: overclockman le 04 April 2018 à 19:23
Voila une bonne raison de plus de ré installer linux.  :hyperbon:

Sujet intéressant me tarde de voir ça.  :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 04 April 2018 à 20:10
Si quelqu'un sait comment s'y prendre et peut nous aider, carrément ! (comme pour Windows et Mac)
Pour l'instant, on va surtout tourner avec Linux et les distros compatibles.
Pour le multi-OS y'a le projet à base de VM/VB (j'espère que toTow va pas nous lire !!) mais bon ça couvre pas Android.

Je dis ça parce que au moins ça permettrait plus facilement d'avoir une version Mac, parce que sinon... l'eau va couler sous les ponts :/
(je suppose que la priorité n°2 sera une version windows)

Seb (qui ne vient plus trop nous voir) serait certainement de bon conseil sur le développement d'un projet boinc, sinon on avait Steiner mais lui ça fait des années qu'il ne vient plus (ni ne crunche).
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 04 April 2018 à 21:10
(j'espère que toTow va pas nous lire !!)
:warf:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 05 April 2018 à 01:01
Vu ce qu'ils proposent sur leur site, j'ai peur que la VM sous Linux pour tout le monde soit la situation la plus simple, à moins d'avoir des spécialistes pour développer sous Windows et sous Mac ... leur sources m'ont pas l'air très compatible avec autre chose qu'un bon vieux GCC ... :/

A moins que ce soit plus simple que prévu et qu'on puisse passer par http://www.mingw.org/ ...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 05 April 2018 à 07:15
Pour l'avoir déjà compilé, même sous Linux c'est assez pénible... Mais la doc indique Windows et Mac
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: mamouth le 05 April 2018 à 09:05
Super un nouveau projet à connotation AF

Je vais l'attendre avec impatience
Bon courage et bonne chance pour la mise en place

Tu fais ça dans le cadre de ton boulot ou de façon bénévole ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 05 April 2018 à 09:10
Merci pour vos encouragements.

C'est pour le boulot, je suis enseignant-chercheur en Informatique et je monte le projet avec un enseignant-chercheur en Chimie.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 05 April 2018 à 11:44
On vous attend de pied ferme ! :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 05 April 2018 à 12:25
Manque le plus important : les badges :D
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Spica le 05 April 2018 à 14:41
Merci pour vos encouragements.

C'est pour le boulot, je suis enseignant-chercheur en Informatique et je monte le projet avec un enseignant-chercheur en Chimie.
super idée, super projet... Je parie que je le connais l'enseignant-chercheur en Chimie....
Vu que je deviens un fantome j'espère quand même y participer...Celà va peut-etre meme m'aider dans mes activités professionnelles....
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 05 April 2018 à 16:55
:kookoo:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 05 April 2018 à 17:58
:kookoo:
:kookoo: :kookoo:
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 05 April 2018 à 19:07
super idée, super projet... Je parie que je le connais l'enseignant-chercheur en Chimie....
Vu que je deviens un fantome j'espère quand même y participer...Celà va peut-etre meme m'aider dans mes activités professionnelles....

Tu attises ma curiosité !  :siflotte:
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: nabz le 05 April 2018 à 19:40
Vu que je deviens un fantome j'espère quand même y participer...
:ouser:  :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 05 April 2018 à 21:41
Damotbe, est-ce que tu as une idée de la date de démarrage de ton projet ? Plutôt dans 1 ou 2 semaines ou plutôt dans 1 ou 2 mois ?
C'est pour savoir si j'occupe mes threads qui vont se libérer avec de longs et fastidieux calculs, ou si je lance des calculs plus courts (c'est pas du BOINC, c'est pour mes recherches sur les suites aliquotes : www.aliquotes.com (http://www.aliquotes.com)).
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 05 April 2018 à 21:47
Damotbe, est-ce que tu as une idée de la date de démarrage de ton projet ? Plutôt dans 1 ou 2 semaines ou plutôt dans 1 ou 2 mois ?
C'est pour savoir si j'occupe mes threads qui vont se libérer avec de longs et fastidieux calculs, ou si je lance des calculs plus courts (c'est pas du BOINC, c'est pour mes recherches sur les suites aliquotes : www.aliquotes.com (http://www.aliquotes.com)).

On est plus de l'ordre de 6-9 mois pour réaliser des vrais calculs. Comme je n'ai jamais monté de projet Boinc, il va me falloir du temps pour comprendre la mécanique... J'ai lu la doc et un bon étudiant a essayé de faire une démo. Il a dit, je cite :  ":grmblbl: !"

J'ai surtout ouvert le topic pour parler de mes avancées et problèmes. Je me dis qu'ici certains ont peut-être des idées et de l'expérience.

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 05 April 2018 à 23:14
Ben pour l'idée et l'expérience je parlais plus haut de Seb (:??:) et Steiner (:().

Y'a https://boinc.berkeley.edu/trac/wiki/EmailLists
et donc https://groups.google.com/a/ssl.berkeley.edu/forum/#!forum/boinc_projects
visiblement ils ont migré il y a peu sous google groups, pour l'instant y'a pas bcp de mouvement...
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 05 April 2018 à 23:21
On est plus de l'ordre de 6-9 mois pour réaliser des vrais calculs.

OK, damotbe, merci pour ces précisions.
Je mets donc mes threads à de longs autres calculs à partir de ce weekend.
J'attendrai que tu annonces le départ de ton projet.

Bon courage en tout cas, ça a l'air hyper intéressant.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 15 April 2018 à 12:44
damotbe, j'ai encore une question.
Si ton projet devait fonctionner sur GPU, ce sera plutôt en half précision, en simple ou en double ?
On parle en effet beaucoup de half précision pour les projets qui font tourner des IA.
A moins que je n'aie rien pigé !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Prof le 15 April 2018 à 15:01
Salut damotbe!

Je ne te serai pas très utile au développement sur Mac mais si tu dois faire des tests, je suis là!!
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 16 April 2018 à 08:05
damotbe, j'ai encore une question.
Si ton projet devait fonctionner sur GPU, ce sera plutôt en half précision, en simple ou en double ?
On parle en effet beaucoup de half précision pour les projets qui font tourner des IA.
A moins que je n'aie rien pigé !

En première phase, on n'a pas de code GPU. Pour l'IA, la partie réseau de neurones doit fonctionner en mixed-precision (half+simple). Les GPU volta devraient bien faire l'affaire ! Reste à développer le code !  :miam:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 16 April 2018 à 18:27
Je me suis fadé l'article wikipédia sur les réseaux de neurone : super intéressant, mais j'ai dû en comprendre moins de 50% :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 16 April 2018 à 19:10
OK, merci pour la réponse.
Reste aussi à attendre que la GPU Volta sorte !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 16 April 2018 à 20:30
Il n'y en aura pas pour le grand public ...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 16 April 2018 à 21:30
La Titan V est déjà sortie  :siflotte: :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 16 April 2018 à 22:01
Oui, mais à 3000 € !!!
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Xe120 le 17 April 2018 à 06:34
Je me suis fadé l'article wikipédia sur les réseaux de neurone : super intéressant, mais j'ai dû en comprendre moins de 50% :D



 :smak:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 17 April 2018 à 08:53
Merci Xe120 :jap:
C'est super-intéressant.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Ceclo le 17 April 2018 à 14:04
 :+1:
Merci Xe120 :jap:
C'est super-intéressant.
Merci! :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Scrat65 le 17 April 2018 à 16:31
Merci à toi, Xe120.  :jap:
Une vidéo à recommander pour commencer à comprendre ce que sont les réseaux de neurones.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 17 April 2018 à 19:06
Du coup dans le futur ca peu servir à quoi concrètement? Car perso je ne vois pas l’intérêt qu'un robot réfléchisse à ma place ou même qu'il prenne des décision à ma place. Je tiens trop à mon libre arbitre...
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 17 April 2018 à 19:57
Du coup dans le futur ca peu servir à quoi concrètement? Car perso je ne vois pas l’intérêt qu'un robot réfléchisse à ma place ou même qu'il prenne des décision à ma place. Je tiens trop à mon libre arbitre...

Dans le cadre de la recherche scientifique, en prenant l'exemple de mon projet, c'est être capable de tenir des raisonnements inaccessibles aux humains. Pour QuChemPedIA, c'est prendre en compte des millions de molécules et en déduire des propriétés chimiques, puis pour proposer des nouvelles molécules avec des propriétés intéressantes. C'est également assister les chercheurs pour choisir les meilleurs paramètres et partir plus proche d'une solution.
Quand on parle d'inaccessibilité aux humains, voire à l'humanité, il faut voir la puissance de calcul phénoménale d'une simple carte graphique :
- l'Humanité, on va arrondir à 10 milliards d'humains, à raison d'un calcul par seconde, fait 10 000 000 000 Opérations/sec (en étant très optimiste)
- Une carte graphique Tesla V100 à 125 TFLOPS (deep learning) , c'est 125 000 000 000 000 Opérations/sec (soit 12 500 X plus que l'Humanité toute entière)
=> en arithmétique, mathématiques, algèbre linéaire, deep learning ... on ne peut pas lutter.
On pourrait faire le même comparatif en terme de stockage...

Si je sors du projet et que je parle de façon plus générale :  un seul cerveau humain peut réaliser de nombreuses tâches. Alors qu'il faut toute notre attention pour faire une simple opération arithmétique, une fraction de seconde suffit à détecter un mouvement, essayer de deviner la forme et réaliser une adaptation motrice adaptée. Et cela pour très peu d'énergie ! Les machines sont très compétitives aussi, mais de suite, le fossé humanité vs machine n'est pas aussi grand. L'humain apprend avec moins d'exemples et j'en passe d'autres... L'IA (la discipline) a encore beaucoup de chemin à parcourir !

En résumé, on a de la puissance de calcul, de la mémoire et des données et il faut trouver un moyen de créer automatiquement de la connaissance, des raisonnements, des comportements dits intelligents. C'est théoriquement (mathématiques et informatique) passionnant, techniquement exigeant mais il reste des questions philosophique auxquelles nous essayons d'apporter des réponses (on peut voir la philosophie comme une discipline qui apporte des tentatives de réponses à des problèmes que la science n'a pas - encore - résolue). Au-delà des artefacts technologiques et des résultats obtenus, on peut se poser des questions sur l'intelligence, la conscience et d'autres concepts. Il faut d'ailleurs noter que d'autres disciplines scientifiques essayent d'apporter des réponses (biologie, neurosciences, psychologie, etc.). L'approche informatique (au sens anglais de Computer Science) est fonctionnelle, on essaye de reproduire la fonction, peu importe l'implémentation. Si on arrive à simuler une conscience un jour, les implications philosophiques sont énormes... et vertigineuses ! Les applications tout autant !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 17 April 2018 à 22:44
La Titan V est déjà sortie  :siflotte: :siflotte:
C'est pas vraiment du grand public vu le tarif ...

Du coup dans le futur ca peu servir à quoi concrètement? Car perso je ne vois pas l’intérêt qu'un robot réfléchisse à ma place ou même qu'il prenne des décision à ma place. Je tiens trop à mon libre arbitre...
Au boulot, y'a un stagiaire qui a fait un Chatbot ...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 18 April 2018 à 01:12
Merci damotbe pour ces explications.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 18 April 2018 à 17:21
merci damotbe. J'y voit plus clair maintenant. Je participerai à ton projet.  :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 18 April 2018 à 19:13
Je précise, que je ne cherche pas à reproduire une quelconque conscience et qu'il n'y a aucune chance que ça arrive par accident !

Ce que fait la méthode utilisée, c'est absorber des données en entrée et essayer de prédire des résultats que l'on connait déjà. C'est donc uniquement trouver une fonction mathématique qui transforme les entrées en sorties le mieux possible. Puis, une fois qu'on est assez bon sur des données qu'on connait, on peut essayer de prédire des données pour lesquelles on ne connait pas le résultat en utilisant cette fonction. La phase 2 consiste donc à utiliser cette fonction pour évaluer des molécules dont on ne connait pas les propriétés. Pas de quoi créer un Terminator ;)

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 18 April 2018 à 19:19
C'est très clair !  :jap:

De tout cœur avec toi, et je participerai bien évidemment aux tests si accessible avec des machines Intel, AMD, ARM sous W7, Ubuntu et Android.

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 18 April 2018 à 20:29
J'en serai aussi si mon matériel le permettra !
Cela sera vraiment très passionnant !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 18 April 2018 à 20:44
Très bien la vidéo, mais le ton de voix du mec est horripilant ! :D

Et très clair aussi les explications de damotbe, ça fait envie ! (heu je veux dire pas skynet, ton projet quoi ;) )
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes>Jip] Elgrande71 le 23 April 2018 à 10:27
Bon courage damotbe  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Sébastien le 02 May 2018 à 07:43
J'ai une tenté une compilation de NWChem sous Windows: https://statseb.boinc-af.org/dl/NWChem.zip

J'ai fait une compilation complète de la version 6.8. Utilisez-vous tous les modules? Avez-vous fait des modifications dans le code source?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 May 2018 à 07:58
J'ai une tenté une compilation de NWChem sous Windows: https://statseb.boinc-af.org/dl/NWChem.zip

J'ai fait une compilation complète de la version 6.8. Utilisez-vous tous les modules? Avez-vous fait des modifications dans le code source?

Merci Seb ! Actuellement, nous faisons des tests sans modules et sans modification du code source. Nous pensions "juste wrapper" NWChem sans trop y toucher. Le code étant surtout en Fortran, je ne sais pas trop comment m'y prendre pour intégrer l'API Boinc dedans...
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 02 May 2018 à 10:03
Le code étant surtout en Fortran

C'est à ça qu'on reconnait les vieux barbons universitaires :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 May 2018 à 14:26
C'est dans les vieux pots... ;)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 01 November 2018 à 10:46
Longue période d'absence sur le forum... Beaucoup de travail sur la partie non Boinc du projet, ce qui est le seul moyen de trouver des financements à terme. Nous sommes deux chercheurs permanents et nous dépendons beaucoup des financements et des stagiaires.

Pour l'aspect scientifique :

Quelques infos en vrac sur la partie Boinc :
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 01 November 2018 à 13:01
:bounce:

Super de te revoir parmi nous ! ce sont des nouvelles TRÈS positives à mon sens, ton projet avance, et bien !
Surtout continue de venir nous tenir au courant régulièrement, nous serons là pour te supporter !

Après pour ta première question sur la phase 1 je pense que oui tu trouveras toujours des crunchers (gros ou pas gros) près à s'impliquer "en mode béta", dans la mesures où tu précises *clairement* les prérequis du projet en gros en gras en haut du site et dans les communications que tu ferais pour le promouvoir sur les forums boinc. J'en ferai partie, si tu as un client Mac (en VM/VB par exemple ;) ) avec ma vieille machine dotée de 16 Go (exprès pour boinc  :gniak:), j'ai fait pareil avec les bétas LHC, etc.

Et pour la phase 2 saches que "patience et longueur de temps font plus que force ni que rage", je serai là aussi :)

:kookoo:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 01 November 2018 à 13:07
Merci damotbe pour ces informations !

Je suis d'accord avec JeromeC, si tu précises bien les besoins, il y a toujours des gens qui auront la machine pour et qui seront hyper contents de faire partie des rares qui peuvent aider.
J'en serai si d'ici là, je devais réussir à m'équiper.

Deux remarques :

  • sur la phase 1 (chimie informatique), on a identifié plusieurs codes donc la puissance de calcul est le facteur limitant : le calcul DFT (logiciel nwChem) et le calcul du PES (potentiel électrostatique avec un code maison). Le point négatif est que ces codes requièrent beaucoup de RAM (> 4Go/cœur idéalement). est-ce vraiment réaliste de demander l'aide des crunchers ?

Oui en effet, 4 Go de RAM par coeur, cela fait beaucoup !
C'est bien 4 Go de RAM par coeur et donc 2 Go par Thread ?
Sur ma future machine que je compte me procurer dans un an, je prévoyais 2 Go par Thread. Avec 32C/64T, cela fait 128 Go de RAM nécessaire.
Certains projets comme Constellation, si certains s'en rappellent avaient déjà besoin de plus de 1 Go de RAM par Thread.

  • sur la phase 2 (intelligence artificielle), j'ai une bonne idée de ce dont on aura besoin, mais nos travaux ne sont pas assez avancés pour envisager cette phase avant 2-3 ans si tout se passe bien (la durée d'une thèse).

Waouh !
2-3 ans !
Et moi qui attendais ce premier projet qui devait utiliser la partie "Half" de ma puce pour cet automne !

Patience donc...

Et bon courage pour ce gros travail qui t'attend !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 01 November 2018 à 13:12
A mon avis il voulait dire "par tâche" (à moins d'envisager des tâches mt ??), et donc par thread.

Attendons la réponse du chef :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 01 November 2018 à 13:49
Prévois une options pour ne cruncher que sur n threads. Ça permettra de participer pour pas mal de monde sans gréver les perf de sa machine.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: GuL le 01 November 2018 à 15:21
Le point négatif est que ces codes requièrent beaucoup de RAM (> 4Go/cœur idéalement). est-ce vraiment réaliste de demander l'aide des crunchers ?
:hello:
Merci pour ces nouvelles. J'ai 24 Go sur une machine linux qui n'attendent que toi. J'étais l'un des des rares à pouvoir cruncher sur The Lattice project...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 01 November 2018 à 16:11
Pour être plus précis, c'est très dépendant de la molécule et des paramètres de calcul.
En gros, Pour DFT je dépasse parfois les 8Go pour une exécution. Pour une machine grand public, c'est beaucoup.
En partant sur un machine 2C/4T, il faut 4Go/cœur ou 2Go/thread.
Pour le code PES, je n'ai pas encore réfléchi à la parallélisation. Actuellement, je peux monter à 10Go pour un seul thread... J'ai également vu passé un papier qui semble faire le même calcul bien plus vite, mais je n'ai pas trouvé de code associé et comme ce n'est pas la priorité du projet pour le moment...

Autre limitation, le temps de calcul pour DFT. Nos premiers tests ont montré des temps pouvant atteindre plusieurs jours sur plusieurs cœurs.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 01 November 2018 à 16:38
Pourquoi se prendre la tete ainsi damotbe! Lance des tests sur Boinc tu verras bien les retours... Non?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 01 November 2018 à 16:47
Pourquoi se prendre la tete ainsi damotbe! Lance des tests sur Boinc tu verras bien les retours... Non?

C'est ce que je compte faire, mais avec très peu d'UT.
Reste un défi de taille, trouver le temps de déployer le code serveur et adapté les codes pour Boinc.
La partie serveur est loin d'être une mince affaire... Déployer le code de démo, j'ai fait, c'est facile.
Produire un vrai projet, c'est pas simple et la technique VM virtualbox est tentante !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 01 November 2018 à 16:59
Hello !

Envisageable de demander la coopération des universités qui font déjà tourner le même type de calculs ?

GPUGRID, TN Grid, LHC, Leiden, MindModeling, ...

Pour la partie mise en place d'un projet BOINC, pas pour le fond de la recherche ;)

Question ouverte, je n'y connais strictement rien.

 :hello: :jap: :kookoo:

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 01 November 2018 à 19:36
Ils ne feront pas le travail à notre place, donc le pré-requis c'est d'avoir du temps ou de l'argent pour payer quelqu'un.
Ensuite oui, je pense qu'en cas de blocage on pourra demander de l'aide.
De toute façon à la fin, il faudra qu'on ait la maitrise totale du bouzin  :pt1cable:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: nafrayou le 02 November 2018 à 01:06
Bonjour tout le monde ( oui oui c est déjà le matin ! )

damotbe j en suis , pour le petit coup de pouce de ton projet j ai une machine de 6C / 12T  avec 32 Go de ram , elle est toute a toi sans problème et avec grand plaisir .

bon quand faut y aller  .........  faut y aller  ....  :aulit:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: f11ksx le 02 November 2018 à 08:07

En partant sur un machine 2C/4T, il faut 4Go/cœur ou 2Go/thread.

Autre limitation, le temps de calcul pour DFT. Nos premiers tests ont montré des temps pouvant atteindre plusieurs jours sur plusieurs cœurs.

J'ai deux machines avec 256 Go de mémoire et 2 autres à 64 Go
J'ai passé dix ans à calculer de courbes elliptiques pour factoriser des nombres de Fermat   :hap:
Même pas peur ! ! !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 02 November 2018 à 19:26
Produire un vrai projet, c'est pas simple et la technique VM virtualbox est tentante !
Ah ça y est, on a perdu toTOW :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 03 November 2018 à 18:14
On m'appelle ? :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: nabz le 05 November 2018 à 18:30
No problemo pour la RAM, il suffira de limiter le nombre d'UT simultanées, soit sur le serveur, soit sur le client en utilisant <project_max_concurrent>.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 05 November 2018 à 21:55
Hello,

content de voir que ce projet se poursuit même si ce n'est pas visible pour la partie BOINC. Nous oublions trop souvent qu'il y a une grosse partie du boulot scientifique qui ne concerne pas BOINC.
En tous cas, cela semble prendre forme, les idées ont été bonnes, ça fait plaisir à voir ! :)

Je ne me mettrais pas un frein à la durée de calcul, ni aux quantités de données à échanger. On a vu des projets, CPDN par exemple, avec des temps de calcul et de données assez importants.

En revanche pour la RAM, je suis un peu plus réservé: avoir un dépassement de RAM provoque de gros soucis sur la machine.
Limiter à une seule UT par machine dans un premier temps me parait sage :jap:

De toutes façons, j'imagine une beta privée avec code d'invitation pour démarrer ? Une spéciale AF ? :D

Bon courage à toi, l'AF sera présente, je n'en doute pas !

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Matt11 le 04 January 2019 à 12:59
 En parcourant les actualités scientifiques, je suis tombé sur cet article (https://www.futura-sciences.com/sciences/actualites/physique-ia-attaque-secrets-eau-equation-schrodinger-10478/#xtor=RSS-8) qui m'a immédiatement fait penser au projet damotbe.

Citer
Dans le cas présent, l'équipe de physiciens a utilisé une variante de ce qui est connu en chimie quantique et en physique de la matière condensée sous le nom de « théorie de la fonctionnelle de la densité » (DFT, pour Density Functional Theory). Cette variante ainsi complétée sur ordinateur par du Deep learning afin d'économiser de la puissance de calcul, les chercheurs ont ainsi pu reproduire plusieurs propriétés thermodynamiques de l'eau, issues de la mécanique quantique, notamment la fameuse différence de densité entre la glace et l'eau liquide, la différence des températures de fusion entre l'eau normale et l'eau lourde contenant du deutérium et la stabilité de différentes formes de glace.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 04 January 2019 à 16:13
Très intéressant article.

Mais je sais pas si un réseau de neurone est adaptable à boinc (= saucissonnage des calculs)... (*)

Damotbe au boulot ! :)


(*) remarquez un projet comme CPDN ne fait (du moins "ne faisais", ça fait un moment que je le suis plus) justement pas du saucissonnage (du moins pas à une petite échelle) mais envoyait justement un "petit" modèle complet à calculer par le cruncher, d'où la très longue durée des tâches...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 04 January 2019 à 18:23
Oui, article super intéressant !
Merci Matt11 !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 06 January 2019 à 16:10
Merci Matt pour cet article intéressant.

J'en profite pour souhaiter à damotbe le meilleur pour son projet durant cette année 2019 !!!

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 23 July 2019 à 17:57
Hello !  :hello:

ça avance malgré un manque cruel de financements.
Vu mon niveau d'activité sur le forum (et en crunch). Vous devez bien vous doutez de quelque chose  :siflotte:
En tout cas, certains me demandent déjà un compte...  :cavachier:

Faisons le point. J'ai un stagiaire, Théo, qui travaille d'arrache pied depuis Avril pour mettre le serveur en place et fournir des applications. Deux serveurs sont en place. Un serveur privé avec des applications qu'on ne peut pas partager. Une campagne de calcul a déjà tournée dessus et c'est plutôt satisfaisant.  :love:
Et un serveur publique (avec code d'invitation) qui possède une application en VM et qui est encore très minimaliste (https://quchempedia.univ-angers.fr/athome/ (https://quchempedia.univ-angers.fr/athome/)). Nous devrions avoir bientôt une campagne de calcul a vous proposer, mais avant ça il faudra faire quelques tests grandeur réelle !  :coffeetime:
Théo devrait bientôt créer un compte sur le forum pour interagir avec vous et vous donner le code d'invitation quand il sera prêt. :gno:

Voilà pour le petit teaser.

Je sais qu'ici nous avons des artistes pour les badges. Si le cœur vous en dit ! Pour rappel, c'est un projet qui mêle chimie moléculaire quantique et intelligence artificielle.

 :kookoo:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 23 July 2019 à 18:00
Hello !  :hello:

ça avance malgré un manque cruel de financements.
Vu mon niveau d'activité sur le forum (et en crunch). Vous devez bien vous doutez de quelque chose  :siflotte:
En tout cas, certains me demandent déjà un compte...  :cavachier:

Faisons le point. J'ai un stagiaire, Théo, qui travaille d'arrache pied depuis Avril pour mettre le serveur en place et fournir des applications. Deux serveurs sont en place. Un serveur privé avec des applications qu'on ne peut pas partager. Une campagne de calcul a déjà tournée dessus et c'est plutôt satisfaisant.  :love:
Et un serveur publique (avec code d'invitation) qui possède une application en VM et qui est encore très minimaliste (https://quchempedia.univ-angers.fr/athome/ (https://quchempedia.univ-angers.fr/athome/)). Nous devrions avoir bientôt une campagne de calcul a vous proposer, mais avant ça il faudra faire quelques tests grandeur réelle !  :coffeetime:
Théo devrait bientôt créer un compte sur le forum pour interagir avec vous et vous donner le code d'invitation quand il sera prêt. :gno:

Voilà pour le petit teaser.

Je sais qu'ici nous avons des artistes pour les badges. Si le cœur vous en dit ! Pour rappel, c'est un projet qui mêle chimie moléculaire quantique et intelligence artificielle.

 :kookoo:
:hyperbon: :hyperbon: :hyperbon:  :hap: :hap:  :kookoo: :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 23 July 2019 à 18:02
J'ai oublié l'essentiel.  :D
Est-ce possible d'avoir un code d'invitation ?
Merci.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 23 July 2019 à 18:09
:bounce:

Je veux bien être alpha-testeuse aussi :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 23 July 2019 à 18:54
Idem :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 23 July 2019 à 22:12
Tout d'abord bravo damotbe pour ce travail !!!  :plusun:

Je n'ose imaginer la complexité pour tout mettre en place.  :gloiraseti:

En tous cas, VM ou pas, saches que tout mon parc est à ta disposition pour faire des tests: il y a du Intel, du AMD, du W7, W10, Ubuntu 16.04 et 18.04

En attente de tes nouvelles et d'un code d'invitation  :chefouichef: :chefouichef: :chefouichef:

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 24 July 2019 à 05:41
 :plusun:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 24 July 2019 à 08:40
Impatient   :+1:

(essaie de trouver des idées de badges...)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes]on2vhf le 24 July 2019 à 15:50
 :plusun:
Félicitations  :hello:
J'ai hâte aussi  :pt1cable:
Laurent
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Matt11 le 24 July 2019 à 18:19
Une chose est sure, la "hype" est bien présente.
J'espère que la quantité de calcul dont vous avez besoin est assez grande pour satisfaire tout le monde.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: zelandonii le 24 July 2019 à 23:05
Je plussoie, à ta disposition! :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 24 July 2019 à 23:54
J'aurais bien voulu participer ... mais bon ... :/
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 25 July 2019 à 08:20
J'aurais bien voulu participer ... mais bon ... :/

Ce sont les VM qui t'embêtent ? Tu utilises plutôt quoi comme OS ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 26 July 2019 à 00:33
Il est anti-VM, point. :lol:

Mais on l'aime bien quand même :)

Moi je veux bien aider, les VM c'est le pied !! ;)

En revanche je crains fort que malgré la VM vous n'en soyez pas encore à faire un wrapper macOS... ??

Et sur le shadow, on peut pas installer VirtualBox... ou si ??
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 26 July 2019 à 21:35
Pas de virtualisation sur un Shadow, c'est déjà une machine virtuelle et on est pas dans Inception :D
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 26 July 2019 à 23:25
Pas de virtualisation sur un Shadow, c'est déjà une machine virtuelle et on est pas dans Inception :D

(https://reho.st/thumb/self/3a5cf13e8585dd4f662de919fec47c3114b32bdf.jpg) (https://reho.st/view/self/3a5cf13e8585dd4f662de919fec47c3114b32bdf.jpg)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 27 July 2019 à 11:14
:D

Rions encore un peu : dans le cadre des théories du complot, je me suis dit "je vais réessayer, pour voir". J'avais déjà tenté d'installer VB dans le shadow au tout début, je me souviens plus du tout à quelle moment j'avais fait marche arrière et désinstallé complètement VB (erreurs dès l'installation ?)

Bref je suis joueur (parfois), j'essaye à nouveau : installation de la dernière version 5.2.32 (pas la 6, faut pas déconner), boinc la reconnait au lancement. Je télécharge une image débian sur un site, je crée la VM sous VB à partir de l'image existante. Je lance.

Reboot ! test complet du disque ! ouf le Shadow a redémarré normalement !!

A ne pas essayer, donc :lol:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 27 July 2019 à 11:54
:D

Rions encore un peu : dans le cadre des théories du complot, je me suis dit "je vais réessayer, pour voir". J'avais déjà tenté d'installer VB dans le shadow au tout début, je me souviens plus du tout à quelle moment j'avais fait marche arrière et désinstallé complètement VB (erreurs dès l'installation ?)

Bref je suis joueur (parfois), j'essaye à nouveau : installation de la dernière version 5.2.32 (pas la 6, faut pas déconner), boinc la reconnait au lancement. Je télécharge une image débian sur un site, je crée la VM sous VB à partir de l'image existante. Je lance.

Reboot ! test complet du disque ! ouf le Shadow a redémarré normalement !!

A ne pas essayer, donc :lol:
C'est donc a ça que tu passe ta journée ?
Avec l'accord de ton employeur ça va sans dire.  :desole:   :lol:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 28 July 2019 à 17:33
Ah non c'était hier ça à la maison :lol:

Chez mon employeur aucun risque : pas de droits admin sur le poste, impossible d'installer quoi que ce soit, j'utilise juste une version portable de boinc sans connexion au réseau (je dois passer pas le partage réseau de mon phone pour pouvoir télécharger les tâches, le proxy du bureau ne le permettant pas) ;)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 31 July 2019 à 11:29
Bonjour à tous.

Je me présente, je suis le stagiaire qui s'occupe de la partie BOINC.
Je vais être votre principal interlocuteur pendant le mois qui vient, alors n'hésitez pas à me faire part des remarques ou bug. ;)

Dans un premier temps je vais envoyer le code d'invitation par MP à un nombre limité d'utilisateur et avec peu de calcul.
Si tout se passent bien, je pourrai augmenter le nombre de calcul et le nombre de personne sur le projet.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 31 July 2019 à 11:52
 :bipbip:

YEAH !!!! Code d'invitation reçu, je regarde cela sur la pause déjeuner !!!   
Super heureux d'avoir été sélectionné :) :) :)

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: mamouth le 31 July 2019 à 12:37
Je veux bien aussi jouer à l'alpha testeur  :jap:

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 31 July 2019 à 14:38
Quelle version de VirtualBox est recommandée ? La 5.2.8 ?

J'ai la 6.0.10 sous Ubuntu 16.04 et les UTs partent en erreur direct.

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 31 July 2019 à 14:51
J'ai la version 6.0.10r132055 sur ma machine et je n'ai pas eu de problème.
Ton problème a l'air de venir du fait que tu n'as pas la virtualisation d'activer.

VBoxManage: error: AMD-V is disabled in the BIOS (or by the host OS) (VERR_SVM_DISABLED)
VBoxManage: error: Details: code NS_ERROR_FAILURE (0x80004005), component ConsoleWrap, interface IConsole
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 31 July 2019 à 15:40
Mea culpa, je n'ai pas vérifié l'activation suite à une mise à jour de BIOS...  :jap:

La première UT est en cours, l'occupation CPU semble fluctuante mais pas grave  :)

Je ne lance qu'une seule UT par machine pour le moment, je verrai ce soir pour en lancer deux en //

Merci de ton aide et ta réactivité !  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 31 July 2019 à 16:23
Salut tdeze, sympa de venir nous voir, mis à part que août on est pas bien nombreux, French majority oblige ! (pour ma part vacances dans 2 jours)

Bon alors c'est sûr vous voulez pas développer un wrapper Mac pour ce projet sous VB ??

(http://queenmama.fr/wp-content/uploads/2015/12/shrek-spin-off-chat-botte-T-1.jpeg)

Pourtant c'est faciiiiiiile :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Cocagne le 31 July 2019 à 16:27
Je suis aussi intéressée pour Mac mais j'ai aussi une machine windows qui pourrait tester  :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 31 July 2019 à 16:32
Merci pour le code d'invitation, première tâche presque finie :love:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 31 July 2019 à 16:32
Salut JeromeC,

Il existe un wrapper Mac, mais je n'ai pas de Mac pour le tester. Si tu veux le tester, je peux t'envoyer un code .
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 31 July 2019 à 16:43
Sur ma première machine (Ryzen 1700X/W10) la tâche semble de plus en plus patiner à l'approche des 100% après ~4h de calcul.

Une idée du temps de calcul sur une de vos machines par exemple ?
 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 31 July 2019 à 17:00
Salut JeromeC,

Il existe un wrapper Mac, mais je n'ai pas de Mac pour le tester. Si tu veux le tester, je peux t'envoyer un code .
Tu veux dire que tu génères des tâches pour Mac ? le serveur boinc doit générer des tâches par OS, à ma connaissance ce n'est pas générique...

Moi je veux bien, mais comme je disais je pars vendredi matin, retour dans 3 semaines. Donc je pourrais pas faire un test très suivi avant fin août, mais après je serai complètement volontaire.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 31 July 2019 à 17:05
 :hello:
Je veux bien tester moi aussi  :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 31 July 2019 à 17:14
[AF] fansyl: C'est normal il faut que j'affine le temps de calcul. Environ 7~8 heures.

JeromeC: Je crée une tâche générique (fichier d'entrée) qui utilise un exécutable spécifique pour chaque os (windows_x86_64, x86_64-pc-linux-gnu et x86_64-apple-darwin).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] Pascal le 31 July 2019 à 17:21
 :kookoo:
Une idée comme ça, limiter le nombre d'unités envoyées par machine afin de pouvoir faire calculer un maximum de machines différentes.

Je veux bien tester également.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Cocagne le 31 July 2019 à 17:32
C'est parti sur mac
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 31 July 2019 à 19:58
Heu ben je le veux bien le code d'invitation alors !! je pourrai faire un peu de test jusqu'à demain soir !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 31 July 2019 à 20:39
J'ai une erreur assez originale:

Citer
31/07/2019 14:24:44 | QuChemPedIA@home | Task dsgdb9nsd_nwchem,bath19,dsgdb9nsd_064550,nwchem_vm,1564566046_0 postponed for 86400 seconds: VM Hypervisor failed to enter an online state in a timely fashion.

Je verrai bien demain si elle se débloque.

Edit: j'ai redémarrer le boinc manager, la tâche est repartie de zéro et est bloquée de nouveau au même endroit : 12.8%
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 31 July 2019 à 22:48
Première tâche finie :)
Citer
31 Jul 2019, 11:48:50 UTC   31 Jul 2019, 20:46:14 UTC   Terminé et validé   32,244.00   55,438.55   1,083.76   NWChem VM v0.81 (vbox64)
x86_64-pc-linux-gnu
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 31 July 2019 à 23:04
Je veux bien participer aux tests (si c'est possible) !  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 31 July 2019 à 23:05
Ah oui 15h quand même, pas la peine d'attendre :D , je vais me coucher  :aulit:

Toi aussi elle a patiné à la fin ?

Pour mon erreur précédente, j'ai installé le Pack Extension pour VirtualBox 5.2.8 mais pas de changement.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 31 July 2019 à 23:17
En fait, elle affichait 7h39 une fois finie (sur 4 coeurs), mais effectivement la fin est longue. Elle était à 96.77% au bout de 1h48...
https://quchempedia.univ-angers.fr/athome/result.php?resultid=2157
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 31 July 2019 à 23:40
Bon c'est un projet français, je veux bien faire une exception, il faut installer quoi pour tester ? :??:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Rhodan71 le 31 July 2019 à 23:54
 :hello: je veux bien être bêta testeur, si possible  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 01 August 2019 à 05:13
Hello  :hello:

Je veux bien un code d'invitation, si possible :)

Merci ! :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 01 August 2019 à 06:38
Une UT de fini.
Citer
   31 Jul 2019, 15:20:48 UTC    1 Aug 2019, 1:09:35 UTC    Completed and validated    35,327.00    74,504.92    1,187.38    NWChem VM v0.81 (vbox64)
windows_x86_64

Et sur Ubuntu 2 Ut a 99,999% après 13H de calcul et elle continu.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 01 August 2019 à 09:35
Bonjour,

Je vais arrêter d'envoyer le code temporairement, car certain calcul ne sont pas validés à cause de problème de chimie.

On m'a demandé pourquoi le forum n'était pas activé, alors c'est damotbe qui m'a dit qu’actuellement nous utiliseront ce forum pour les retours pour plus simplicité.

Je vais aussi regarder pourquoi les calculs sont si longs, je prends peut être pas assez de ram par application (1 Gb) ?

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 01 August 2019 à 09:45
Mais oui prends-en de la RAM, elle n'est pas chère en ce moment !!!  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 01 August 2019 à 10:10
3 Gb ça passe ou il faut mieux que je limite a 2 Gb ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 01 August 2019 à 11:00
Alors sur mes machines, tu peux prendre 3Go mais c'est un peu risqué pour d'autres.

Je dirai 3Go si tu limites le nombre de tâches à une seule à la fois, 2Go si tu laisses libre le nombre d'UT en // mais ce n'est que mon avis.

 :hello:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 01 August 2019 à 11:04
3 Gb ça passe ou il faut mieux que je limite a 2 Gb ?

2 Go et une petite partition swap à l'image d'une machine virtuelle
cela a aidé la nouvelle application sur le LHC-dev
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 01 August 2019 à 11:15
Bon bah j'étais partie sur du 3, mais je vais devoir toutes recrées pour du 2. :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 01 August 2019 à 12:12
Bonjour,
Je rentre tout juste de vacances.
Je veux bien tester aussi quand ce sera possible.
Cela fonctionne-t-il sur GPU ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 01 August 2019 à 12:41
J'ai recrée les jobs avec plus de ram, ça devrait améliorer les perf et corriger le problème d'invalide. Pour ceux qui ont le projet, penser à faire un update du projet.
Je vais renvoyer le code a d'autres personnes (on va dire 5), donc poster un message après celui-là, cela plus simple pour savoir qui en veut.

PS: Il faut avoir VirtualBox et la virtualisation d'activé.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 01 August 2019 à 12:42
[AF>Amis des Lapins] Jean-Luc: pas de calcul GPU pour l'instant.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 01 August 2019 à 12:54
je veux bien tester, merci  :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 01 August 2019 à 12:57
Je veux bien participer, merci !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 01 August 2019 à 13:05
J'ai envie de participer à votre projet.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 01 August 2019 à 14:41
Win7, BOINC 7.14.2, VBox 5.2.8

la tâche démarre et s'exécute: 25% de la CPU (1 cœur), une charge par minute 100% (4 coeurs), la mémoire est stable à 70% de 4 Go
après 5 minutes, les messages apparaissent dans le journal

2019-08-01 15:17:49 (1584): Starting VM. (boinc_ed0f7192d1f2212a, slot#5)
2019-08-01 15:22:56 (1584): Successfully started VM. (PID = '4828')
2019-08-01 15:22:56 (1584): Reporting VM Process ID to BOINC.
2019-08-01 15:22:56 (1584): VM is no longer is a running state. It is in 'poweredoff'.
2019-08-01 15:22:57 (1584): VM is no longer is a running state. It is in 'poweredoff'.
2019-08-01 15:22:59 (1584): VM is no longer is a running state. It is in 'poweredoff'.
. . . .
2019-08-01 15:27:55 (1584): VM is no longer is a running state. It is in 'poweredoff'.
2019-08-01 15:27:56 (1584): VM is no longer is a running state. It is in 'poweredoff'.
2019-08-01 15:28:02 (1584):
   NOTE: VM failed to enter an online state within the timeout period.
               This might be a temporary problem and so this job will be rescheduled for another time.

VM continue de fonctionner comme avant
après 5 minutes supplémentaires, la tâche est reportée d'une journée (86400s)
l'application est déchargée, la machine virtuelle est dans un état interrompu

L'application ne voit-elle pas la machine virtuelle?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 01 August 2019 à 14:54
Je vais attendre le retour d'autre personne s'ils ont le problème, avant de modifier des choses, et je vais regarder si je trouve une solution de mon côté.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 01 August 2019 à 15:04
regardé d'autres ordinateurs avec Win7 - tout est similaire

https://quchempedia.univ-angers.fr/athome/result.php?resultid=2085
https://quchempedia.univ-angers.fr/athome/result.php?resultid=2161

c'est la mienne
https://quchempedia.univ-angers.fr/athome/result.php?resultid=3135
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 01 August 2019 à 15:24
ça viendrait de windows 7.  :/

Voici un qui a fonctionné même version de BOINC et de VirtualBox mais sur Windows 10.
https://quchempedia.univ-angers.fr/athome/result.php?resultid=2169
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 01 August 2019 à 16:28
Une tâche en cours sur un ordi Win10 (4 CPU)...
deux autres ordis Win10 avec zéro tâche : pas de tâche dispo !?

Essai sur Linux et Android mais y a-t-il des tâches dipos pour ces 2 OS ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 01 August 2019 à 16:35
franky82: Actuellement il y a 415 jobs non envoyé. Normalement il y a des jobs pour toutes  les machines qui ont VirtualBox donc pas android.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 01 August 2019 à 17:07
Pourtant, malgré l'utilisation de BSF pour forcer le téléchargement de tâches, je n'arrive pas à charger de tâche pour ces 2 ordis Win10 (qui ont bien VirtualBox installé et fonctionnel - déjà utilisé pour d'autres projets) ! :-/
#waitandsee
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 01 August 2019 à 17:17
franky82 : Voici le problème la virtualisation n'est pas activée.
Virtualbox (5.2.26) installé, le processeur est compatible avec la virtualisation matérielle, mais n'est activé
https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=16
Virtualbox (5.2.26) installé, le processeur est incompatible avec la virtualisation matérielle
https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=17
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] Pascal le 01 August 2019 à 17:33
 :kookoo: J'aimerais également recevoir un code.

Merci tdeze. :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 01 August 2019 à 17:43
@tdeze OK, merci, je n'avais pas assez fouillé !  :/  :jap:
(pourtant j'ai déjà crunché des projets vbox avec ces ordis)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: mamouth le 01 August 2019 à 19:47
Je veux bien un code aussi

2 PC sous win7
2 sous win10
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 01 August 2019 à 20:13
Bonjour,

Je vais arrêter d'envoyer le code temporairement, car certain calcul ne sont pas validés à cause de problème de chimie.

On m'a demandé pourquoi le forum n'était pas activé, alors c'est damotbe qui m'a dit qu’actuellement nous utiliseront ce forum pour les retours pour plus simplicité.

Je vais aussi regarder pourquoi les calculs sont si longs, je prends peut être pas assez de ram par application (1 Gb) ?

Merci Théo pour le boulot !

Effectivement, vue la charge de travail, on ne se voit pas modérer un forum, donc pour le moment ce n'est pas activé.

De mon côté la plupart des jobs (sur ma machine win7) partent en "Reporté : VM Hypervisor failed to enter an online state in a timely fashion." Est-ce que ça peut venir d'un timeout que l'on peut configurer ? Ma machine mouline trop ? j'entends beaucoup le disque dur (7200tr/min) c'est peut-être un indice (swap de la VM).

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: MortelKni le 01 August 2019 à 21:48
Je veux bien participer également ! Un Pc sous W10, et possible d'en lancer un autre sous debian si ça peut aider.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 01 August 2019 à 22:53
Même problème que toi damotbe sur ma machine i7-3770 sous W7. En revanche le vieux Core2Quad Q9550 sous W7 également est en train d'en faire une depuis 5h, on verra demain matin.

En tous cas, le temps de calcul à l'air bien plus réaliste sur la nouvelle série d'UT, ça évite qu'il en charge 24 d'un coup comme un débile  :electric:

Les heures WUProp sont bien comptabilisées, c'est cool  :plusun:

Il reste à les voir dans les StatsSeb et une belle série de badges pour être au top ! D'ailleurs je suis étonné qu'aucun AFien n'ai proposé qqch, pour les RAID, les gens sont inspirés !  :D

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 01 August 2019 à 23:38
Si vous avez encore besoin de testeurs, je dois avoir une machine qui respecte les critères pour participer ...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 01 August 2019 à 23:39
Désolé pas eu le temps du tout de tenter la chose, trop de taff en ce dernier jour de boulot, et là demain adios cassos y hasta luegos :)

Conseils (plus ou moins utiles):
- le forum de boinc lui même pour les pbms bizarres
- le google group "boinc_projetcts" (cf le site de boinc) pour avoir d'autres dev boinc aguerris à l'autre bout du fil
- les fora des projets à base de VM eux même (LHC...) ?

La VM c'est pas simple à bien régler au début, tous les projets à VM ont plus ou moins galéré.

L'erreur de l'hyperviseur ça me rappelle quelque chose, faut la chercher sur google / les fora de projets à VM :)

Bon courage !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 01 August 2019 à 23:41
PS : OULA ! toTow qui propose DEUX FOIS DE SUITE son aide pour participer sur un projet à VM  :bouh:

Laissez pas passer cette opportunité, ça se reproduira pas deux fois ;) :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 02 August 2019 à 01:49
C'est pas faux ... surtout que le laptop qui peut participer est plus en très grande forme :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: marmot le 02 August 2019 à 03:33
Hello

I am one of the people that pestered damotbe to join the testing (found him on Collatz@home).
He pulled out the :cavachier: when mentioning us above in the thread  :blbl:

I use 24 of my own build VM's to run BOINC and have 4 machines with various Virtual BOX versions and hardware to test the new VM app on.
Please let me help even though I'm a snooty American who can not speak French.


ImTranslator   v.15.30 http://about.imtranslator.net/about/company/ (http://about.imtranslator.net/about/company/)
Bonjour

Je suis l’une des personnes qui ont harcelé damotbe pour participer aux essais (je l’ai trouvé sur Collatz @ home).
Il a sorti le :cavachier: en nous mentionnant ci-dessus dans le fil :blbl:

J'utilise 24 de mes propres VM pour exécuter BOINC et j'ai 4 machines avec différentes versions de Virtual BOX et du matériel pour tester la nouvelle application de VM.
S'il vous plaît, laissez-moi vous aider, même si je suis un américain prétentieux qui ne parle pas français.

La marmotte, porteuse de la peste bubonique
https://www.theguardian.com/world/2019/may/06/mongolian-couple-die-of-bubonic-plague-after-eating-marmot (https://www.theguardian.com/world/2019/may/06/mongolian-couple-die-of-bubonic-plague-after-eating-marmot)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 02 August 2019 à 07:33
Hello je veux bien participer  :kookoo:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 August 2019 à 09:04
Hello

I am one of the people that pestered damotbe to join the testing (found him on Collatz@home).
He pulled out the :cavachier: when mentioning us above in the thread  :blbl:

I use 24 of my own build VM's to run BOINC and have 4 machines with various Virtual BOX versions and hardware to test the new VM app on.
Please let me help even though I'm a snooty American who can not speak French.


ImTranslator   v.15.30 http://about.imtranslator.net/about/company/ (http://about.imtranslator.net/about/company/)
Bonjour

Je suis l’une des personnes qui ont harcelé damotbe pour participer aux essais (je l’ai trouvé sur Collatz @ home).
Il a sorti le :cavachier: en nous mentionnant ci-dessus dans le fil :blbl:

J'utilise 24 de mes propres VM pour exécuter BOINC et j'ai 4 machines avec différentes versions de Virtual BOX et du matériel pour tester la nouvelle application de VM.
S'il vous plaît, laissez-moi vous aider, même si je suis un américain prétentieux qui ne parle pas français.

La marmotte, porteuse de la peste bubonique
https://www.theguardian.com/world/2019/may/06/mongolian-couple-die-of-bubonic-plague-after-eating-marmot (https://www.theguardian.com/world/2019/may/06/mongolian-couple-die-of-bubonic-plague-after-eating-marmot)

Welcome here Marmot ! :jap:

I planned to send you an invitation code after this very alpha testing part. But if you want to join, Théo (tdeze) can send you the code.

Best regards
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 02 August 2019 à 10:11
:hello: les admins de l'AF!

J'ai vu qu'il existait déjà une équipe (https://quchempedia.univ-angers.fr/athome/top_teams.php), vous voulez bien créer l'AF, SVP? Merchiiiiiiii! :jap:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 02 August 2019 à 10:20
:hello: les admins de l'AF!

J'ai vu qu'il existait déjà une équipe (https://quchempedia.univ-angers.fr/athome/top_teams.php), vous voulez bien créer l'AF, SVP? Merchiiiiiiii! :jap:
Perso je ne sais pas le faire d'habitude c'est Damien qui s'en occupe.  :/
 
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 August 2019 à 11:11
En tout cas merci à tous pour votre aide  :smak:
ça va bien nous aider !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 02 August 2019 à 11:25
Actuellement, je regarde pourquoi les temps de calcul sont si longs et le problème de l'hyperviseur.


Merci pour vos retours.  :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Cocagne le 02 August 2019 à 11:47
Sur mac on dirait que VB n'utilise pas les 4 coeurs alloués.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 02 August 2019 à 12:31
De mon côté la plupart des jobs (sur ma machine win7) partent en "Reporté : VM Hypervisor failed to enter an online state in a timely fashion."

Idem pour moi.
RAM très loin d'être saturée !
Déjà 6 tâvhes dans ce cas, aucune n'a atteint les 11 minutes !

@damotbe et fansyl : Vous avez réussi à régler le problème, et si oui, comment ?
Cela a-t-il un rapport avec la version de la Virtual Box ?
Et d'ailleurs, comment faites-vous pour connaître votre version de Virtual Box ?

Je vais suspendre le projet en attendant !

Sinon, pour info :

Dans les app-config.xml, pour mobiliser 4 threads, il faut mettre :

<app_config>
   <app>
   <name>nwchem_vm</name>
   <max_concurrent>1</max_concurrent>
   </app>
</app_config>

au lieu de :

<app_config>
   <app>
   <name>nwchem_vm</name>
   <max_concurrent>4</max_concurrent>
   </app>
</app_config>
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 August 2019 à 13:24
j'ai redémarré ma machine, ça semble fonctionner. J'ai l'impression qu'il aime pas trop quand je suspend les tâches  :??:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 02 August 2019 à 13:26
J'ai le problème aussi bien avec VirtualBox 5.2.8 que 6.0.10 sous W7 sur ma machine i7-3770.

Comme je disais plus haut, mon vieux Core2Quad sous W7 et 6.0.10 est en train d'en faire une depuis hier soir, donc je ne comprends pas le problème.

Sinon de mon avis, le ligne <max_concurrent> c'est pour régler le nombre d'UT exécutées en même temps. Je suis à 1 et elle utilise bien 4 cœurs de CPU, avec des fluctuations de temps en temps.

Edit: un reboot n'a rien changé chez moi

 :hello:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: mamouth le 02 August 2019 à 13:42
De mon côté la plupart des jobs (sur ma machine win7) partent en "Reporté : VM Hypervisor failed to enter an online state in a timely fashion."

Idem pour moi.

La tâche reste dans boincmanager mais il ne se passe plus rien
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 August 2019 à 13:44
Je pense que le code de nwchem n'est pas 100% parallèle. l'occupation CPU fluctue entre 1 et 4 cœurs.
C'est peut-être améliorable avec une meilleur compilation+bibliothèques, sinon une version 1 cœur ne devrait pas "trop" allonger les temps de calcul...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 02 August 2019 à 13:46
Le reboot ne change rien pour moi non plus...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 02 August 2019 à 14:24
Sous Manjaro avec VirtualBox 6.0.8 ça fonctionne comme une horloge suisse.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 02 August 2019 à 15:00
Sous Win10 (2 ordis) avec VB 5.2.8 : c'est long mais ça fonctionne jusqu'au bout !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 02 August 2019 à 15:01
Ni redémarrage de BOINC, ni rechargement, ni mise à jour vers la version VBox 6.0.10 - rien n'y fait


https://quchempedia.univ-angers.fr/athome/result.php?resultid=2096
un journal très intéressant pour cette tâche
d'abord eu une erreur. mais ensuite, à la deuxième tentative, il a glissé et à cet endroit même:
2019-08-01 07:15:57 (49240): Reporting VM Process ID to BOINC.
2019-08-01 07:15:57 (49240): Guest Log: BIOS: VirtualBox 5.2.8
2019-08-01 07:15:57 (49240): VM state change detected. (old = 'poweredoff', new = 'running')
2019-08-01 07:15:58 (49240): Guest Log: CPUID EDX: 0x178bfbff
2019-08-01 07:15:58 (49240): Guest Log: BIOS: ata0-0: PCHS=4161/16/63 LCHS=520/128/63

ainsi, soit vboxwrapper ne peut pas recevoir le code de processus de la machine virtuelle (affiche 0 secondes de temps CPU, bien que le processus fonctionne réellement).
ou l'extension invité (Guest ext) ne démarre pas et la connexion avec la machine virtuelle n'est pas établie

peut-être devriez-vous essayer avec une version différente de vboxwrapper
ou basculé vers une version encore plus ancienne de VBox
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 02 August 2019 à 15:19
SVojna Actuellement, j'utilise la version vboxwrapper_26202_windows_x86_64 qui fonctionne pour virtualbox 6.0 (la seul?). Je vais crée un version spécial pour virtualbox 5 avec la version vboxwrapper_26200_windows_x86_64 pour testé.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Cocagne le 02 August 2019 à 15:43
Pour l'erreur Hypervisor je l'avais eu il y a longtemps sur lhc et en utilisant les infos dans ce fil, si je me souviens bien, j'avais réussi à régler le problème

https://lhcathome.cern.ch/lhcathome/forum_thread.php?id=4161&postid=29359#29359
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 02 August 2019 à 15:45
Ceux qui ont un problème d'hyperviseur mettez à jour le projet pour voir si vous récupérez bien la version NWChem VM v0.83 (vbox64v5) de l'application.
Et dit moi si ça règle votre problème.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 02 August 2019 à 16:12
Je viens d'abandonner des v0.83 (vbox64) et j'ai récupéré des v0.83 (vbox64v6), on va voir.

 :hello:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: mamouth le 02 August 2019 à 16:32
Ceux qui ont un problème d'hyperviseur mettez à jour le projet pour voir si vous récupérez bien la version NWChem VM v0.83 (vbox64v5) de l'application.
Et dit moi si ça règle votre problème.


ah j'ai une unité  NWChem VM v0.83 (vbox64v5)  active depuis 19 minutes

mes 2 précédents tests n'avaient pas dépassé les 11 minutes
wait and see donc

par contre je confirme aussi que l'UT prends 4 core mais n'en n'utilise qu'1 la majorité du temps
avec des pic à 99% d'utilisateur des 4 core
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 02 August 2019 à 16:39
après la mise à jour a reçu un mélange de versions
v6 est encore arrêté.
v5 fonctionne bien - le premier point de contrôle passé, affiche le temps CPU
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 02 August 2019 à 16:42
vbox64v6 : pour virtualbox v6+ est identique a vbox64.
vbox64v5 : pour virtualbox v5 (downgrade du wrapper pour la version 26200)

Pour l'histoire qu'un seul cœur est utilisé à la fois, c'est sans doute dus que pas tout le code est multithread.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 02 August 2019 à 16:46
SVojna: Tu as reçus des v6 sur une machine qui avait virtualbox 5 ou la v5 sur une machine qui avait virtualbox 6 ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 02 August 2019 à 16:50
Pour mon ordi (Win10) où la virtualisation n'était pas activée (mais processeur compatible) :
j'ai redémarré mon ordi, modifié le BIOS pour activer la virtualisation...
pourtant, malgré le rafraîchissement de mon ordi sous BM (et même la suppression de celui-ci et la réinstallation de QuChemPedIA), celui-ci apparaît toujours avec virtualisation non activée et ne charge, donc, pas de tâche !?  :/
(pourtant, le gestionnaire des tâches affiche bien que la virtualisation est activée)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 02 August 2019 à 17:02
franky82:  La balise <p_vm_extensions_disabled> (si présente) n'est pas définie sur 1 dans cc_config.xml ou sched_request_sourcefinder .... xml?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 02 August 2019 à 17:14
J'ai essayé différentes versions - 5.1.18 et 6.0.10
mais retourne maintenant la version standard pour BOINC - 5.2.8
c'est avec la version 5.2.8 que j'ai reçu un ensemble de tâches 4pcs v6 et 4pcs v5
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 02 August 2019 à 18:25
Aucun problème pour moi à part des temps de calcul un peu longs et une utilisation CPU qui oscille entre 1 et 4.

-ubuntu 16.04.6 avec VirtualBox 6.0.10r132072
-ubuntu 18.04.2 avec VirtualBox 5.2.18r124319
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 02 August 2019 à 18:33
franky82:  La balise <p_vm_extensions_disabled> (si présente) n'est pas définie sur 1 dans cc_config.xml ou sched_request_sourcefinder .... xml?
Rien de ce genre dans cc_config et je n'arrive pas à laisser la balise <p_vm_extensions_disabled> à 0 : elle se remet à 1 chaque fois !?
(elle apparaît dans plusieurs fichiers XML)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 02 August 2019 à 18:47
franky82:  La balise <p_vm_extensions_disabled> (si présente) n'est pas définie sur 1 dans cc_config.xml ou sched_request_sourcefinder .... xml?
Rien de ce genre dans cc_config et je n'arrive pas à laisser la balise <p_vm_extensions_disabled> à 0 : elle se remet à 1 chaque fois !?
(elle apparaît dans plusieurs fichiers XML)

essayer le fichier client_state.xml 
source https://lhcathome.cern.ch/lhcathome/forum_thread.php?id=4051
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 02 August 2019 à 18:53
J'ai essayé aussi...

[Edit] J'ai essayé de changer cette balise plusieurs fois mais elle se remet à 1... impossible !  :/ [/Edit]
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 02 August 2019 à 20:57
L'UT de mon vieux Core2Quad est validée !!  :clafete:

https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=2733

Config: W7, Boinc 7.14.2, VirtualBox 6.0.10, pas d'extension pack, 8Go de RAM, 16Go de swap

Je pars une semaine en vacances, je laisse les vannes ouvertes sauf sur ma machine i7-3770 qui bloque sur l'erreur "VM Hypervisor"

Continuez bien le débug et essayez de ne pas partir dans tous les sens ;)

On a la chance de participer à l'accouchement d'un projet, je trouve cela incroyable !!!  :)

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 02 August 2019 à 22:36
Task dsgdb9nsd_nwchem,bath19,dsgdb9nsd_069127,nwchem_vm,1564656012_0 postponed for 86400 seconds: VM job unmanageable, restarting later.

Ben mince alors  :(
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 03 August 2019 à 07:38
Hello !

Est-il possible de créer l'équipe ?

Merci  :hello: :jap: :kookoo:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: mamouth le 03 August 2019 à 09:33
J'ai essayé aussi...

[Edit] J'ai essayé de changer cette balise plusieurs fois mais elle se remet à 1... impossible !  :/ [/Edit]

tu as bien arrêté boinc avant de faire le changement ?
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 03 August 2019 à 09:54
J'ai essayé aussi...

[Edit] J'ai essayé de changer cette balise plusieurs fois mais elle se remet à 1... impossible !  :/ [/Edit]

tu as bien arrêté boinc avant de faire le changement ?
Oups... effectivement, ça fonctionne mieux !  :desole:
(je pensais l'avoir arrêté pourtant  :cpopossib: )

Donc, 3 ordis Win10 sur le projet (le dernier en VB 6) !  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 03 August 2019 à 12:14
Vous allez développer l'application sous Android?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 03 August 2019 à 12:20
Viens de constater un truc bizarre qui confirme ce que d'autres ont déjà dit.
Théoriquement, l'appli est censée tourner +- sur 4 coeurs, ce qui se traduit normalement par une différence équivalente entre temps de fonctionnement et temps de CPU. En regardant les tâches valides, j'ai constaté que pour les dernières le temps de fonctionnement = temps CPU, donc calcul uniquement sur 1 coeur.
https://quchempedia.univ-angers.fr/athome/results.php?hostid=7&offset=0&show_names=0&state=4&appid=

Serait-il envisageable d'enlever le MT?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 03 August 2019 à 12:50
Vous allez développer l'application sous Android?

Non, vus les temps de calcul et la complexité, ce n'est pas envisageable malheureusement.

Viens de constater un truc bizarre qui confirme ce que d'autres ont déjà dit.
Théoriquement, l'appli est censée tourner +- sur 4 coeurs, ce qui se traduit normalement par une différence équivalente entre temps de fonctionnement et temps de CPU. En regardant les tâches valides, j'ai constaté que pour les dernières le temps de fonctionnement = temps CPU, donc calcul uniquement sur 1 coeur.
https://quchempedia.univ-angers.fr/athome/results.php?hostid=7&offset=0&show_names=0&state=4&appid=

Serait-il envisageable d'enlever le MT?

Je suis assez d'accord avec ça, ce sera certainement plus simple à gérer. Par contre, le temps de calcul risque d'être de plusieurs jours.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: mamouth le 03 August 2019 à 13:09
Peut être essayer de passer à 2 cores à la place de 4 ?
et évaluer après


sur ce résultat on voit que le temps de fonctionnement est +- égale à la moitié du temps CPU

https://quchempedia.univ-angers.fr/athome/results.php?hostid=24
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 03 August 2019 à 13:50
Je vais suivre le conseil de mamouth et passé sur du 2 cœurs, mais je ne le désactive pas (pour l'instant), car certain des calculs utilise bien plusieurs cœurs.
https://quchempedia.univ-angers.fr/athome/result.php?resultid=3385

Selon les configurations:
VBOX6 + aucun problème -> ne changer rien
VBOX6 + problème d'hyperviseur -> passer à la version de VBOX5
VBOX5 + aucun problème -> ne changer rien
VBOX5 + problème d'hyperviseur -> envoyer moi le nom de l'apps + id du job qui a planté
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 03 August 2019 à 15:29
:jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 03 August 2019 à 18:07
Reprise des tests dans quelques jours.
VBOX 6x partout ici => tout est parti en erreur.
Dois réinstaller 5x
 :hello: :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 05 August 2019 à 09:59
:hello:
Reçu de nouvelles tâches prévues pour tourner sur seulement 2 CPU. Ce qui est marrant, c'est que les anciennes (prévues pour 4 CPU) se comportent comme des 2 CPU (cf. capture jointe). En fait, je n'ai que 6 cœurs dédiés à Boinc sous Manjaro, j'ai une VM Windows de 5 cœurs sur cet ordi (et le dernier me sert à bosser, naviguer, etc.).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 05 August 2019 à 17:27
Malheureusement, le serveur ne répond plus et je n'ai pas les accès pour le rallumer...  :/
L'équipe technique devrait pouvoir intervenir après le 20 aout :(

Merci pour votre aide ! on remet ça bientôt :hyperbon:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 05 August 2019 à 17:37
Espérons que ce ne soit rien de grave. En attendant on te garde les UT au chaud ;)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 05 August 2019 à 18:00
Malheureusement, le serveur ne répond plus et je n'ai pas les accès pour le rallumer...  :/
L'équipe technique devrait pouvoir intervenir après le 20 aout :(

Merci pour votre aide ! on remet ça bientôt :hyperbon:
Le 20 Août ? oups !!  :cavapobienmwa:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 05 August 2019 à 18:50
 :kookoo:
Il m'en reste quelques unes dont la deadline est le 15. Je les calcule ou pas?  :??:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 05 August 2019 à 18:58
:kookoo:
Il m'en reste quelques unes dont la deadline est le 15. Je les calcule ou pas?  :??:
Une UT commencer c'est une UT valider.  :kookoo:
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 05 August 2019 à 19:26
:kookoo:
Il m'en reste quelques unes dont la deadline est le 15. Je les calcule ou pas?  :??:
Une UT commencer c'est une UT valider.  :kookoo:
Bon ben Je les calcule alors  :)  :jap:

EDIT: sauf que ça va un peu vite là... ça sent le plantage  :priz2tet:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 20 August 2019 à 15:09
:hello:

Bonne rentrée (on est bien le 20 aujourd'hui :ange: )!

Comment va le serveur?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 20 August 2019 à 15:39
:hello:

Bonne rentrée (on est bien le 20 aujourd'hui :ange: )!

Comment va le serveur?
:+1:    :ange:
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 20 August 2019 à 18:07
J'aurais bien voulu participer ... mais bon ... :/

Ce sont les VM qui t'embêtent ? Tu utilises plutôt quoi comme OS ?

Moi aussi pas de VM, alors...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 22 August 2019 à 12:58
Désolé, la personne en charge du serveur reviendra lundi prochain...  :/ :cry:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 22 August 2019 à 14:26
:calin:

Pas de souci, les UT restent bien au chaud sur l'ordi d'ici là ;)
Ça permet de voir aussi les variations de temps d'exécution (voir capture (https://www.dropbox.com/s/n8pw8x45r71t31e/capture%20du%202019-08-20%2009-21-00.png?dl=0)), sachant que les tâches marquées 4 CPU ont été traitées comme des 2 CPU.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 22 August 2019 à 18:42
:calin:

Pas de souci, les UT restent bien au chaud sur l'ordi d'ici là ;)
Ça permet de voir aussi les variations de temps d'exécution (voir capture (https://www.dropbox.com/s/n8pw8x45r71t31e/capture%20du%202019-08-20%2009-21-00.png?dl=0)), sachant que les tâches marquées 4 CPU ont été traitées comme des 2 CPU.
modesti  :hello:

Tu continu a faire du Quake-Catcher Network alors que cela fait bien longtemps que le projet ne crédite plus ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 22 August 2019 à 21:34
modesti  :hello:

Tu continu a faire du Quake-Catcher Network alors que cela fait bien longtemps que le projet ne crédite plus ?
:hello: fzs
C'est pour les heures WUprop ;) Taiwan crédite parfois, quand il n'est pas en carafe. Mais j'avoue que sous Linux les UT ont tendance à dire "Erreur de calcul" au bout des 24h réglementaires, que ce soit l'un ou l'autre. :spamafote:
Si je calculais pour les crédits, ça se saurait :D Il n'y a qu'à regarder la liste des projets de mon compte WUprop et la comparer avec ceux de mes stats.
[fin du HS]
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 24 August 2019 à 12:07
Bon back in business mais il va donc falloir patienter un peu pour aider !

Ce qui me désole le plus c'est mon inaptitude à pouvoir proposer mon aide pour la partie Mac, mes souvenirs de (vrai) dev sont trop loin (j'ai fait du dev sur ERP durant des années mais des langages propriétaires "précablés" ça n'a rien à voir...), j'avais pas réussi à compiler les applis goofix quand je lui avais proposé mon aide, même pas réussi à compiler correctement le projet exemple "Hello world" de boinc, et ce même avec l'aide de Seb, trop d’écueils et trop d'expérience de dev requise... en fait c'est un métier !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 26 August 2019 à 13:27
Server is back !  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 26 August 2019 à 14:05
UTs renvoyées et ma machine principale Ryzen/W10 en a repris 8 configurées pour 2 CPUs.

Je m'occuperai des autres machines ce soir.

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 26 August 2019 à 14:40
J'ai pu créer mon compte avec le code que m'avait fourni tdeze avant mes vacances, en revanche il faudra que j'ai accès à mon shadow pour tenter de m'y rattacher (je suppose que c'est très normal qu'il ne soit pas encore référencé dans SAM).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 26 August 2019 à 14:44
Hop, UT en attente renvoyées... reprise du crunch après le Wow Event SETI !

@JeromeC Pas de VM sur Shadow donc pas de QuChemPedIA !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 26 August 2019 à 14:49
Ahhhhh horreur malheur c'est vrai...

Je crois qu'on en avait parlé plus haut dans le topic et j'avais déjà constaté que je pourrais pas aider du tout (le PC du taff je peux pas installer VB non plus).... snif.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 27 August 2019 à 09:56
Les tâches récupérées hier après-midi ont été annulées par le serveur vers 22h UTC, pas reçu de nouvelles tâches Windows depuis.
En revanche, une machine Linux a reçu de nouvelles tâches, sans VirtualBox apparemment, je les laisse se calculer, le nombre de threads utilisés semble dépendre de la machine et c'est tant mieux !  :plusun:

 :hello:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 27 August 2019 à 10:19
Les tâches récupérées hier après-midi ont été annulées par le serveur vers 22h UTC, pas reçu de nouvelles tâches Windows depuis.
Pareil : tâches récupérées, annulées par le serveur dont une qui avait crunché pendant 12h...  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 27 August 2019 à 13:39
Enfin la reprise des serveurs pour ma dernière semaine de stage. :(

J'ai mis en place une application statique donc plus besoin de VM sur Linux. Ce qui avait peur de VM et était sur Linux. Vous pouvez-vous manifester pour que j'envoie un code d'invitation.

PS: désoler pour les jobs que j'ai du stop. Je n'ai pas le temps d'attendre, pour les tests.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 27 August 2019 à 14:36
Et pour les windosiens?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 27 August 2019 à 15:27
Hélas par manque de temps dû en partie à la coupure des serveurs. Les versions sans VM pour Windows et macOS sont en pause. :/
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 27 August 2019 à 15:48
Hélas par manque de temps dû en partie à la coupure des serveurs. Les versions sans VM pour Windows et macOS sont en pause. :/

Il faut qu'on se voit rapidement, pour le passage de relais (= faire vivre le serveur en l'état jusqu'au prochain stagiaire)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 27 August 2019 à 16:26
Sur Windows, retour des tâches VM à 4 CPU (et non 2, comme avant la coupure serveur) !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 27 August 2019 à 16:30
Sur Windows, retour des tâches VM à 4 CPU (et non 2, comme avant la coupure serveur) !

J'ai normalement corriger le problème du nombre de cœur, quand ça indique 4 cœurs ça utilise bien 4 cœurs. Si c'est pas le cas signalé le moi.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: mamouth le 27 August 2019 à 16:49
tâche en erreur

https://quchempedia.univ-angers.fr/athome/result.php?resultid=5662

2019-08-27 15:25:20 (6420): Checkpoint completed.
2019-08-27 15:35:05 (6420): Creating new snapshot for VM.
2019-08-27 15:35:11 (6420): Deleting stale snapshot.
2019-08-27 15:35:16 (6420): Checkpoint completed.
2019-08-27 15:45:07 (6420): Creating new snapshot for VM.
2019-08-27 15:45:14 (6420): Deleting stale snapshot.
2019-08-27 15:46:00 (6420): Checkpoint completed.
2019-08-27 15:55:11 (6420): Creating new snapshot for VM.
2019-08-27 15:55:18 (6420): Deleting stale snapshot.
2019-08-27 15:55:22 (6420): Checkpoint completed.
2019-08-27 15:56:46 (6420): Powering off VM.
2019-08-27 15:57:06 (6420): Successfully stopped VM.
2019-08-27 15:58:21 (7080): vboxwrapper (7.9.26200): starting
2019-08-27 15:58:21 (7080): Feature: Checkpoint interval offset (424 seconds)
2019-08-27 15:58:21 (7080): Detected: VirtualBox COM Interface (Version: 5.1.20)
2019-08-27 15:58:21 (7080): Detected: Minimum checkpoint interval (600.000000 seconds)
2019-08-27 15:58:21 (7080): Guest Log: BIOS: VirtualBox 5.1.20

2019-08-27 15:58:21 (7080): Guest Log: BIOS: ata0-0: PCHS=16383/16/63 LCHS=1024/255/63

2019-08-27 15:58:21 (7080): Guest Log: BIOS: Boot : bseqnr=1, bootseq=0032

2019-08-27 15:58:21 (7080): Guest Log: BIOS: Booting from Hard Disk...

2019-08-27 15:58:21 (7080): Guest Log: BIOS: KBD: unsupported int 16h function 03

2019-08-27 15:58:21 (7080): Guest Log: BIOS: AX=0305 BX=0000 CX=0000 DX=0000

2019-08-27 15:58:21 (7080): Guest Log: vgdrvHeartbeatInit: Setting up heartbeat to trigger every 2000 milliseconds

2019-08-27 15:58:21 (7080): Guest Log: vboxguest: misc device minor 59, IRQ 20, I/O port d020, MMIO at 00000000f0000000 (size 0x400000)

2019-08-27 15:58:21 (7080): Guest Log: vboxsf: g_fHostFeatures=0x1 g_fSfFeatures=0x0 g_uSfLastFunction=20

2019-08-27 15:58:21 (7080): Restore from previously saved snapshot.
2019-08-27 15:58:21 (7080): Restore completed.
2019-08-27 15:58:21 (7080): Starting VM. (boinc_0ae849ad690d64c9, slot#12)
2019-08-27 15:58:29 (7080): Successfully started VM. (PID = '6436')
2019-08-27 15:58:30 (7080): Reporting VM Process ID to BOINC.
2019-08-27 15:58:38 (7080): VM state change detected. (old = 'poweroff', new = 'running')
2019-08-27 15:58:42 (7080): VM is no longer is a running state. It is in 'poweroff'.
2019-08-27 15:58:42 (7080): VM state change detected. (old = 'running', new = 'poweroff')
2019-08-27 15:58:42 (7080): Powering off VM.
2019-08-27 15:58:42 (7080): Deregistering VM. (boinc_0ae849ad690d64c9, slot#12)
2019-08-27 15:58:42 (7080): Removing virtual disk drive(s) from VM.
2019-08-27 15:58:42 (7080): Removing network bandwidth throttle group from VM.
2019-08-27 15:58:42 (7080): Removing storage controller(s) from VM.
2019-08-27 15:58:42 (7080): Removing VM from VirtualBox.
2019-08-27 15:58:48 (7080): Virtual machine exited.
15:58:53 (7080): called boinc_finish(0)

</stderr_txt>
<message>
upload failure: <file_xfer_error>
  <file_name>dsgdb9nsd_nwchem,bath19,dsgdb9nsd_061724,nwchem,1566864766_0_r1620499490_0</file_name>
  <error_code>-161 (not found)</error_code>
</file_xfer_error>
<file_xfer_error>
  <file_name>dsgdb9nsd_nwchem,bath19,dsgdb9nsd_061724,nwchem,1566864766_0_r1620499490_1</file_name>
  <error_code>-161 (not found)</error_code>
</file_xfer_error>


ce poste avait pourtant renvoyé des tâches correctes et validées début août
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 27 August 2019 à 17:11
Oh ! j'ai réussi via la console linux intégrée au browser (KVM, sous chrome) de ma VM OVH , depuis mon PC du taff, à me rattacher au projet en ligne de commande avec un clavier qwerty (dans KVM, heureusement que j'ai commencé à bosser sur du qwerty dans ma jeunesse, j'ai encore les réflexes !) et SANS copier / coller (bonjour l'URL et la clé de compte :D) , exploit !!!

Et là... pas de tâche :cry:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 27 August 2019 à 22:44
J'ai l'impression que les tâches 4 CPU sous Linux fonctionne bien mais que les autres ont du mal  :/

Est-il nécessaire de décrire les erreurs ici ou vous avez assez d'informations côté serveur ?

Comment peut-t-on faire pour ne recevoir que des tâches 2, 4 ou 8 CPU ? Un app_config semble inefficace car il n'y a qu'une seule application reconnue par BOINC  :??:

Bon courage pour l'épluchage des log....  :paf:

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 28 August 2019 à 09:31
Ben moi la petite VM linux ne reçoit pas de tâche et c'est pas une impression !

Monocore... c'est pour ça ?

Le serveur dit qu'il a du stock, mais comme d'hab (comme tout serveur boinc) ça nous dit pas la répartition par OS.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 28 August 2019 à 09:54
2ème tâche 4 CPU sous Windows (NWChem v0.02 (vbox64_t4)) qui finit en état "Valider l'erreur" après 10h de crunch !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 28 August 2019 à 10:07
2ème tâche 4 CPU sous Windows (NWChem v0.02 (vbox64_t4)) qui finit en état "Valider l'erreur" après 10h de crunch !

Je sais que pendant nos tests, il  a fallu identifier quelles erreurs étaient informatiques ou chimiques. Si le problème est lié à la chimie, au final ce n'est pas une erreur de calcul. Quand, on sera capable de bien classer les problèmes, certaines erreurs seront des succès. Pour l'instant, vous nous aider à y voir plus clair. Merci !  :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 28 August 2019 à 11:08
N'oublies pas que le cruncher qui crunche et dont les (surtout longs) temps de calculs ne sont pas comptabilisés est un cruncher déçu ;)

Après heureusement qu'il y a WUProp :D

Mais pour vous aider dans votre phase de test nous somme prêts à tout :)
(mais pour ça, faut des tâches...)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: mamouth le 28 August 2019 à 13:03
Même problème de validation que franky82

https://quchempedia.univ-angers.fr/athome/result.php?resultid=5812

par contre ce qui est positif c'est que ce PC n'avait jamais réussi à terminer une tâche avant aujourd'hui
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 28 August 2019 à 13:48
N'oublies pas que le cruncher qui crunche et dont les (surtout longs) temps de calculs ne sont pas comptabilisés est un cruncher déçu ;)

Après heureusement qu'il y a WUProp :D

Mais pour vous aider dans votre phase de test nous somme prêts à tout :)
(mais pour ça, faut des tâches...)

Je pensais à un badge pour les testeurs, mais je ne suis pas graphiste  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 28 August 2019 à 14:31
Quel type de badge veux-tu?
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 28 August 2019 à 14:32
Je pensais à un badge pour les testeurs, mais je ne suis pas graphiste  :/
J'avais commencé à réfléchir sur une version à proposer mais le projet attend toujours dans un dossier de mon disque dur...  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 28 August 2019 à 14:35
Franky, nous avons des badges fait au-paravent  :kookoo:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 28 August 2019 à 15:00
Quel type de badge veux-tu?
Des badges pour testeurs.  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 28 August 2019 à 15:01
OK, je laisse mon projet en stand-by (au cas où...) !  :kookoo:

(ces 4 badges n'ont pas trop de rapport avec chimie quantique, encyclopédie et IA)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 28 August 2019 à 16:03
Monocore... c'est pour ça ?

vos hôtes sont cachés. identifié un approprié (n ° 34). le problème est pas assez de mémoire, vous avez besoin de plus de 2 Go. J'ai un hôte avec un problème similaire, un peu moins de 2 Go.

peut en quelque sorte séparer les tâches en fonction de la mémoire requise - avec les ordinateurs virtuels et en mode natif pour Linux


sur les badges - vous avez besoin de deux jeux de dessins
un ordinaire - avec gradation de couleur (bronze, argent, or) ou degré (1k, 1M, 1G)
et le deuxième, spécial - alpha / bêta, les résultats trouvés (le cas échéant, figureront dans ce projet)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 28 August 2019 à 16:11
Ben moi la petite VM linux ne reçoit pas de tâche et c'est pas une impression !

Monocore... c'est pour ça ?

Le serveur dit qu'il a du stock, mais comme d'hab (comme tout serveur boinc) ça nous dit pas la répartition par OS.

Il n'existe pas de tâches mono-coeur que du 2, 4 et 8 coeurs. 
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 28 August 2019 à 16:29
Il n'existe pas de tâches mono-coeur que du 2, 4 et 8 coeurs.

Le sheduler vérifie-t-il les paramètres du PC (nombre de cœurs)?
ou s'agit-il simplement du nom de la classe de plan et du paramètre de tâche?

vérifier que la mémoire requise est réelle - il existe une entrée dans les journaux du client (>2048.49M)

PS sur 4 processeurs, vous pouvez exécuter la tâche en 2 threads et 32 threads
1 CPU n'a qu'une seule mise en garde: prise en charge du multi-threading dans le système d'exploitation
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 28 August 2019 à 16:35
Il n'existe pas de tâches mono-coeur que du 2, 4 et 8 coeurs.

Le sheduler vérifie-t-il les paramètres du PC (nombre de cœurs)?
ou s'agit-il simplement du nom de la classe de plan et du paramètre de tâche?

vérifier que la mémoire requise est réelle - il existe une entrée dans les journaux du client (>2048.49M)

J'ai définie plusieurs plans de classe pour chaque nombre de coeurs (t2, t4, t8), normalement le sheduler dois vérifier le PC.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 28 August 2019 à 16:47
puis pour les extrêmes - uniquement à titre d’expérience pour le numéro d’hôte 34

<cc_config>
   <options>
      <ncpus>2</ncpus>
   </options>
</cc_config>
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 28 August 2019 à 18:19
Merci à tous les deux pour vos réponses : SVojna je suppose que tu es la personne qui reprend la suite du travail de tdeze ? ah ben non j'ai lu tes diverses interventions et non ! (bienvenu quand même :) ! )

Pour la visibilité de mon hôte j'ai constaté que l'option "Acceptez-vous que QuChemPedIA@home affiche vos ordinateurs sur son site web ?" est décochée par défaut sur mon compte, je l'ai coché maintenant.

Mais mon hôte est une toute petite VM linux "apacher" chez OVH : un seul core et peu de mémoire, donc il est fort possible que je n'arrive pas aux prérequis !

Dommage : j'arrive à faire du LHC sixtrack et du LHC native theory qui utilise un genre de docker, donc j'avais bon espoir !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 28 August 2019 à 22:09
Tiens, WUProp ne comptabilise pas mes crunchs des dernières 24h pour QuChemPedIA !?  :eek:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 29 August 2019 à 10:26
Me dis pas que WUProp le comptabilisait *déjà* ?? :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 29 August 2019 à 11:54
Je vais annuler tous les WU en cours, car j'ai l'impression qu'elles vont tous échoué pour en lancer des nouvelles que j'espère vont réussir.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 29 August 2019 à 13:35
Je vais annuler tous les WU en cours, car j'ai l'impression qu'elles vont tous échoué pour en lancer des nouvelles que j'espère vont réussir.
Voila c'est fait toute mes UT annuler.
Et je viens de récupérer la V0.03.  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 29 August 2019 à 15:09
Toutes les V0.03 sont parties en erreur sur mon I7 ubuntu 18.04 (ID 20)
j'ai ce message dans le stderr output:
*** WARNING : deprecated key derivation used.
Using -iter or -pbkdf2 would be better.

chose curieuse, j'ai eu des t8 pour 8 threads alors que j'ai reçu des t4 pour 40 threads sur mon autre ordi.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 29 August 2019 à 15:14
Toutes les V0.03 sont parties en erreur sur mon I7 ubuntu 18.04 (ID 20)
j'ai ce message dans le stderr output:
*** WARNING : deprecated key derivation used.
Using -iter or -pbkdf2 would be better.

chose curieuse, j'ai eu des t8 pour 8 threads alors que j'ai reçu des t4 pour 40 threads sur mon autre ordi.

Le warning c'est pas un problème. C'est juste que logiciel n'arrive pas allouer les 8 coeurs (un coeur qui est déja trop utilisé?). Par contre les 40 threads  :eek:. Tu peut me donne le nom de la tâche ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 29 August 2019 à 15:25
tache 6912
son nom: dsgdb9nsd_nwchem,bath19,dsgdb9nsd_062013,nwchem,1567073125_0
parmr les 64 que j'ai reçues, toutes des t4
les calculs ont l'air de bien se dérouler.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 29 August 2019 à 17:30
Me dis pas que WUProp le comptabilisait *déjà* ?? :D
Oui, WUProp les comptabilisait mais maintenant ça ne progresse plus !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 29 August 2019 à 17:36
Me dis pas que WUProp le comptabilisait *déjà* ?? :D
Oui, WUProp les comptabilisait mais maintenant ça ne progresse plus !

C'est peut être du a cause que les calculs ne sont pas validé.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 29 August 2019 à 17:42
Ça n'a rien à voir avec la validation: WUprop comptabilise les heures passées à calculer sur un projet. Mais si l'application a changé de nom, il faut d'abord une validation manuelle par Sébastien avant que la nouvelle appli n'apparaisse.

Je viens de vérifier dans mon compte WUprop (une UT est passée depuis que le taf sur QuChemPedIA a repris), et je n'ai rien non plus.
L'ancienne appli s'appelait "NWChem VM", la nouvelle est "NWChem 0.02 (t2)" (chez moi).

Conclusion: On reprend les heures à zéro :D (chouette, des applis supplémentaires pour des étoiles supplémentaires :bounce: )
Heureusement que la précédente était déjà rubis chez moi :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 29 August 2019 à 17:44
Calculer et valider.
Citer
29 Aug 2019, 10:28:13 UTC    29 Aug 2019, 15:42:07 UTC    Terminé et validé    18,834.00    108,555.60    1,131.53    NWChem v0.03 (t8)
x86_64-pc-linux-gnu
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 29 August 2019 à 17:47
Ça n'a rien à voir avec la validation: WUprop comptabilise les heures passées à calculer sur un projet. Mais si l'application a changé de nom, il faut d'abord une validation manuelle par Sébastien avant que la nouvelle appli n'apparaisse.

Je viens de vérifier dans mon compte WUprop (une UT est passée depuis que le taf sur QuChemPedIA a repris), et je n'ai rien non plus.
L'ancienne appli s'appelait "NWChem VM", la nouvelle est "NWChem 0.02 (t2)" (chez moi).

Conclusion: On reprend les heures à zéro :D (chouette, des applis supplémentaires pour des étoiles supplémentaires :bounce: )
Heureusement que la précédente était déjà rubis chez moi :D

oui la nouvelle app s’appelle nwchem (NWChem) au lieu de nwchem_vm (NWChem VM) comme il y a plus de vm pour linux.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 29 August 2019 à 18:07
Serait-il possible d'accepter d'autres membres? J'ai mon code d'activation mais impossible de me créer de compte... :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 29 August 2019 à 21:00
4, 40, tu chipotes :)

Et oui c'est pas simple la mise au point d'application !!

Dommage qu'il aime pas ma petite VM minux...
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 29 August 2019 à 22:08
Ça n'a rien à voir avec la validation: WUprop comptabilise les heures passées à calculer sur un projet. Mais si l'application a changé de nom, il faut d'abord une validation manuelle par Sébastien avant que la nouvelle appli n'apparaisse.

Je viens de vérifier dans mon compte WUprop (une UT est passée depuis que le taf sur QuChemPedIA a repris), et je n'ai rien non plus.
L'ancienne appli s'appelait "NWChem VM", la nouvelle est "NWChem 0.02 (t2)" (chez moi).

Conclusion: On reprend les heures à zéro :D (chouette, des applis supplémentaires pour des étoiles supplémentaires :bounce: )
Heureusement que la précédente était déjà rubis chez moi :D
Sur WUProp, j'a bien la ligne "NWChem VM" avec les anciennes UT (qui reste à zéro/24h) mais je n'ai pas de nouvelle ligne avec "NWChem 0.02 (t4)" ou "NWChem 0.03 (t4)" !  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 29 August 2019 à 23:37
Ça va viendre, franky ;)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: mamouth le 30 August 2019 à 08:29
Ce matin j'ai une UT validée sur chacun de mes 2 PC qui participent à la béta  :sun:

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 30 August 2019 à 09:28
Conclusion: On reprend les heures à zéro :D (chouette, des applis supplémentaires pour des étoiles supplémentaires :bounce: )
Heureusement que la précédente était déjà rubis chez moi :D
Wé bon c'est moyen quand même c'est censé être une appli qui fait la même chose depuis le début, je vois pas pourquoi un changement de version veut dire nouveau nom et compteurs à 0.

Ça va que c'est une appli en test et c'est pas vraiment significatif, mais c'est pas le seul projet à faire ça, à force les étoiles voudront plus dire grand chose...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 30 August 2019 à 09:51
J'ai examiné les statistiques sur les tâches (t2) pour Linux - moins de 400 Mo de mémoire + 2 Go de swap.

Est-il possible de réduire légèrement l'utilisation de la mémoire de l'ordinateur, de 2048.49 à au moins 1900 Mo? Ensuite, le monoprocesseur Minux pourra obtenir la tâche (t1)  ;o)

En ce qui concerne le nom "NWChem 0.02 (t2)" - les statistiques ne prennent pas en compte le numéro de version et le nom de la classe de plan, mais uniquement le nom de l'application (ligne bleue sur la page de l'application). Nous devons informer Sebastian - ceci est une nouvelle application, ou encore il est nécessaire de le considérer comme l'ancien "NWChem VM" (il existe des versions avec VirtualBox)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 30 August 2019 à 10:01
Ça va viendre, franky ;)
Hé bien non, toujours pas !? Pourtant, cela fait 3 jours que je crunche les nouvelles UT !  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 30 August 2019 à 10:37
Sébastien doit être absent ou trop pris par son taf IRL :spamafote:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 30 August 2019 à 15:03
J'ai examiné les statistiques sur les tâches (t2) pour Linux - moins de 400 Mo de mémoire + 2 Go de swap.

Est-il possible de réduire légèrement l'utilisation de la mémoire de l'ordinateur, de 2048.49 à au moins 1900 Mo? Ensuite, le monoprocesseur Minux pourra obtenir la tâche (t1)  ;o)
Ça serait très gentil pour lui :D

Sébastien doit être absent ou trop pris par son taf IRL :spamafote:
Sébastien travaille dans l'ombre, gardons la foi et peut-être que soudain hop ça va se corriger :)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 31 August 2019 à 08:14
Le warning c'est pas un problème. C'est juste que logiciel n'arrive pas allouer les 8 coeurs (un coeur qui est déja trop utilisé?). Par contre les 40 threads  :eek:. Tu peut me donne le nom de la tâche ?
Problème résolu pour l'I7: je suis passé de 8 threads à 7 alloués à BOINC et il ne fait plus qu'une tache t4 à la fois et ça passe.
Pour l'autre ordi je me suis peut être mal exprimé. C'est l'ordi qui a 40 threads pas la tache.  :desole:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: tdeze le 31 August 2019 à 16:54
J'ai examiné les statistiques sur les tâches (t2) pour Linux - moins de 400 Mo de mémoire + 2 Go de swap.

Est-il possible de réduire légèrement l'utilisation de la mémoire de l'ordinateur, de 2048.49 à au moins 1900 Mo? Ensuite, le monoprocesseur Minux pourra obtenir la tâche (t1)  ;o)
Ça serait très gentil pour lui :D

Sébastien doit être absent ou trop pris par son taf IRL :spamafote:
Sébastien travaille dans l'ombre, gardons la foi et peut-être que soudain hop ça va se corriger :)

J'ai diminué la demande de ram a 1900 mo et ajouter à l'application la possibilité de fonctionner sur 1 coeur. Peut tu me dire si tu arrive a récupérer des jobs ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 31 August 2019 à 17:27
récupéré une tache t1 sur un vieil AMD  :)
ubuntu 16.04 2.7 Go de RAM mais le système en bouffe déjà pas mal...
Durée estimée: 3 jours
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 31 August 2019 à 21:00
J'ai diminué la demande de ram a 1900 mo et ajouter à l'application la possibilité de fonctionner sur 1 coeur. Peut tu me dire si tu arrive a récupérer des jobs ?
Il dit qu'il faut 2048,49 MB pour avoir des tâches et que l'hôte n'en a que 1858,54 MB, j'ai réussi à augmenter la mémoire max allouée à boinc mais ça coince quand même à 1917,23 MB.

J'ai fait un reset du projet mais pareil.

On dirait que ça ne lit pas ton changement de paramètres. C'est peut-être stocké *dans* les paramètres des tâches déjà générées et il faut attendre de nouvelles tâches ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: mamouth le 03 September 2019 à 10:24
Elles sont longues les tâches , très longues surtout pour une période de tests et de mise au point d'un projet

Il n'y a pas la possibilité de créer des tâches plus courtes durant cette période ?

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 03 September 2019 à 10:38
Le serveur dispose d’un mécanisme très utile pour l’application actuelle: les tâches multi-threading.
Pour ce faire, activez les options avancées dans les préférences utilisateur - le choix du nombre de CPU par tâche et du nombre de tâches simultanées apparaîtra.
Une seule version de l'application restera - (vbox64_mt) ou (native_mt). Et le paramètre pour chaque tâche est <cmdline> --nthreads N </cmdline>.
vbox_wrapper crée une machine virtuelle avec le nombre de processeurs requis (et un paramètre supplémentaire <cmdline> --memory_size_mb a + b * N </cmdline> pour la quantité de mémoire). La tâche obtient le nombre de processeurs pour calculer le nombre de threads.
Un wrapper standard (native_mt) devrait traduire ce paramètre en une forme compréhensible pour l'application de calcul.

PS (native_mt), l'application doit comprendre les commandes standard - pause / work. Maintenant, le script les ignore.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 September 2019 à 11:29
@SVojna : je suis pas bien sûr de comprendre, ça se fait tout seul via un simple paramètre sur le compte, ou il faut bidouiller des fichiers config ?

@tdeze : tu as vu mon message au dessus ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 03 September 2019 à 12:23
J'ai décrit le mécanisme standard présent dans le serveur de projet. De nouvelles options apparaissent sur la page des paramètres utilisateur, dans la section des paramètres du projet (https://quchempedia.univ-angers.fr/athome/prefs.php?subset=project). Ils peuvent être vus sur le LHC et maintenant ils sont apparus sur PrimeGrid

Mais si ces paramètres et l'application qui les exécute (wrapper) sont standard, ils peuvent être redéfinis localement dans app_config.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 September 2019 à 15:35
Ah ok pour le moment ce n'est pas le cas sur le site QuChemPedIA, on a que les quelques options classiques dans les préférences projet.

Mais si je comprends bien ça a déjà été implémenté automatiquement puisque les collègues reçoivent des t4 ou des t8... ou alors vous avez tous bidouillé à grand coup de app_config ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: marmot le 03 September 2019 à 20:21
Me dis pas que WUProp le comptabilisait *déjà* ?? :D

Yes, the first machine running these was running WUProps. 
Unless WUProps has spies everywhere?!?  :desole:


However, now WUProps is not counting the hours for the 3 WU this machine has worked on.


Ooops, tdeze said:
Citer
oui la nouvelle app s’appelle nwchem (NWChem) au lieu de nwchem_vm (NWChem VM) comme il y a plus de vm pour linux.

Guess that also meant Sebastian at WUProps had been contacted and had the entry already in the DB.
I'm really irritated with myself now for missing the first deadline and not getting the 100 hours on that 1st WU name...


Anyway, my test laptop is on the 3rd WU.  The first was invalid (maybe it was suspended too many times from "Compute only between" hours?) The 2nd completed fine.
The other 3 machines, one blew a motherboard, 2 others are only on for summer hours from 12am till 8 am. 
I'll try some on them if the deadline isn't too short.

Questions: 
1) When are the forums at the project website to be brought online? 
2) Is that much trouble?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 04 September 2019 à 09:25
Bonjour mon cher marmot, déjà tu pourrais utiliser google trad (ou mieux : deepl) pour poster en français. Certes les lecteurs peuvent aussi le faire dans l'autre sens, mais nous sommes sur un forum (très) francophone, c'est un "détail" fort apprécié ;)

Ensuite ce projet en est toujours à une phase de mise au point / alpha (je me trompe peut-être mais je ne pense pas que damotbe le considère déjà comme béta ?), je pense qu'ils ont d'autres chats à fouetter (miaou !) que de se mettre à gérer et modérer un forum (avec tout le temps que ça prend, sisi) pour répondre à ces crazy crunchers qui ont toujours des problèmes :)

AMHA, l'énergie est utilisée pour l'instant à stabiliser le software et proposer une offre complète multi-plateforme, c'est déjà un sacré boulot.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 05 September 2019 à 15:29
Bonjour  :hello:

Actuellement Théo a fini sont stage et le projet est en roue libre.
Je regarde de loin si ça tourne toujours en sachant que les résultats seront utiles (longs mais utiles), mais je n'ai pas le temps pour continuer le développement et encore moins pour un forum.

Si on considère que l'alpha est quelque chose de local pour le développement et les tests, on est bien passé en bêta (fermée) avec un panel de testeurs à plus grande échelle.
Dans les faits, c'est là que ça coince, mais regardons le verre à moitié plein :
- le serveur est en place et est capable de générer et gérer les tâches
- l'application fonctionne correctement et nous renvoie des résultats scientifiquement exploitable

Ce qui coince au final:
- les calculs sont longs (mais c'était attendu) et la moindre erreur pénalise le cruncher testeur bénévole (en terme de points). Il faut savoir que le code du simulateur peut planter ou sortir une erreur à cause de la question posée en chimie (problème de convergence par exemple). De mon point de vue, l'application fonctionne plutôt bien (cad. comme sur une machine sans Boinc).
- certains crunchers n'arrivent pas à utiliser l'application (à vérifier) ? ou n'arrive pas à rentrer dans les requis (OS, VM, cœurs ou mémoire).

Propositions réalisables pour transformer le tout en succès :
- faire le point sur la proportion des testeurs qui ont réussi à faire tourner l'application avec succès ou avec un résultat invalide après un gros temps de calcul (signifie que le code s'exécute)
- il faudrait donner des points même en cas d'erreur pour récompenser les temps de calcul très importants (si quelqu'un peut m'expliquer comment faire, je peux bidouiller ça je pense)
- mettre en place le badge bêta testeur et les badges pour les points

D'autres idées ou recommandations ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 05 September 2019 à 15:56
Ça nécessite toujours une VM?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 05 September 2019 à 16:02
Ça nécessite toujours une VM?

D'après les transmissions de Théo, oui pour Windows et MAC, non pour Linux
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 05 September 2019 à 17:02
Dommage...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 05 September 2019 à 17:53
Salut damotbe et merci pour le point de situation détaillé.

Théo avait eu l'air de dire qu'il était en train de changer les applis win et mac pour plus nécessiter de VM comme sur linux, ou j'ai rêvé ? donc il aura pas fini... faut trouver un autre stagiaire aussi performant !! d'ailleurs y'a pas encore d'appli Mac, ou si ?? (auquel cas faut que j'ouvre les vannes sur le Mac !!! là les prérequis je suis bon !)

Sinon la seule remarque que j'ai (et qui à mon avis est un quick win !) : les prérequis pour pouvoir récupérer des tâches sont trop conservateurs (il demande 2 Go de RAM alors qu'il en utilise moins de 1 si j'ai bien compris, il veut plus de 1 seul core... pourquoi tant de laine ? ) et Théo avait écrit ici plus haut qu'il avait baissé le prérequis, mais ma petite VM linux n'arrive quand même pas à en récupérer.
Donc il a ptet pas fait le réglage au bon endroit, ou y'a ptet plusieurs endroits... (global / appli / version... ? )

Pour le moment j'ai pas pu vous aider.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 06 September 2019 à 09:23
- il faudrait donner des points même en cas d'erreur pour récompenser les temps de calcul très importants (si quelqu'un peut m'expliquer comment faire, je peux bidouiller ça je pense)
. . .
D'autres idées ou recommandations ?
trickle-messages à chaque heure de travail et bonus pour le nombre de cœurs par heure

encore

établir des commandes de pause / arrêt et continuer  (Linux native)

points de contrôle et continuation après un arrêt / rechargement

l'application universelle (mt) que j'ai proposée ci-dessus et le choix de préférence du nombre de cœurs (en tant que paramètre de la tâche)

calcul de la mémoire pour chaque tâche sous la forme "a + b * N" (base de lancement plus pour chaque cœur) - paramètre de création d'une machine virtuelle

@JeromeC
J'ai ajouté de la mémoire pour les ordinateurs virtuels de 2 Go + 120 Mo et une charge complète de tous les processeurs sans possibilité d'arrêt. J'ai dû quitter le PC toute la nuit pour ce monstre gourmand
PS Je peux télécharger mon Linux sur le PC "Iron" et sur la machine virtuelle - J'ai configuré le téléchargement PXE à partir du serveur.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 06 September 2019 à 09:55
@JeromeC
J'ai ajouté de la mémoire pour les ordinateurs virtuels de 2 Go + 120 Mo et une charge complète de tous les processeurs sans possibilité d'arrêt. J'ai dû quitter le PC toute la nuit pour ce monstre gourmand
Je ne suis pas sûr de comprendre : combien de RAM une tâche utilise réellement ? pourquoi as-tu dû "ajouter de la mémoire" ?

Je me réfère à ce qu'avait dit tdeze :
J'ai diminué la demande de ram a 1900 mo et ajouter à l'application la possibilité de fonctionner sur 1 coeur. Peut tu me dire si tu arrive a récupérer des jobs ?
malheureusement ça n'avait rien donné, j'en avais parlé ensuite, mais je pense que c'est à ce moment qu'il est parti :/


Citer
PS Je peux télécharger mon Linux sur le PC "Iron" et sur la machine virtuelle - J'ai configuré le téléchargement PXE à partir du serveur.
Ca en revanche j'ai rien compris :)
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 06 September 2019 à 10:35
- il faudrait donner des points même en cas d'erreur pour récompenser les temps de calcul très importants (si quelqu'un peut m'expliquer comment faire, je peux bidouiller ça je pense)
. . .
D'autres idées ou recommandations ?
trickle-messages à chaque heure de travail et bonus pour le nombre de cœurs par heure

encore

établir des commandes de pause / arrêt et continuer  (Linux native)

points de contrôle et continuation après un arrêt / rechargement

l'application universelle (mt) que j'ai proposée ci-dessus et le choix de préférence du nombre de cœurs (en tant que paramètre de la tâche)

calcul de la mémoire pour chaque tâche sous la forme "a + b * N" (base de lancement plus pour chaque cœur) - paramètre de création d'une machine virtuelle

Je ne comprends pas tout ce que tu écris. Par le passé, j'ai travaillé avec l'API pour faire une application Boinc native. C'est effectivement mieux et plus souple. Par contre, ce n'ai pas envisageable avant d'avoir un autre stagiaire (ou un développeur bénévole) pour s'en charger.
Du coup, pas de point de sauvegarde pour le moment, d'où le choix des VM au début.

Je me réfère à ce qu'avait dit tdeze :
J'ai diminué la demande de ram a 1900 mo et ajouter à l'application la possibilité de fonctionner sur 1 coeur. Peut tu me dire si tu arrive a récupérer des jobs ?
malheureusement ça n'avait rien donné, j'en avais parlé ensuite, mais je pense que c'est à ce moment qu'il est parti :/

Oui et il ne m'a rien dit à ce sujet. Malheureusement, c'est le genre de chose que je vais avoir du mal à changer., mais je note pour regarder ça quand j'aurai du temps.
Idem, pour les versions sans VM pour MAC et Windows. Sans Théo ... Rien que le temps de comprendre et apprendre, c'est compliqué de s'attaquer sérieusement à ça. Pourtant j'aimerais bien  :/

Si je fais le point sur les personnes ayant des tâches valides et leur OS :

Les 3 OS fonctionnent!!!  :yaya:

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 06 September 2019 à 13:20
@JeromeC
La tâche nécessite toujours que l'ordinateur dispose de 2 048,49 Mo de mémoire (cela peut être considéré comme une erreur dans les journaux de mon ordinateur avec 2 Go).
Dans mon Ubuntu sur une "vraie" machine, BOINC ne voit que 1,95 Go
Votre Minix n'indique que 1,91 Go
Afin d’obtenir la tâche, j’ai créé une machine virtuelle avec une mémoire supérieure à 2 Go et y ai chargé mon Ubuntu avec BOINC
Vous pouvez (si vous le pouvez) ajouter de la mémoire à votre Minix ...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: SVojna le 06 September 2019 à 13:42
@damotbe

Vous avez créé de nombreuses versions de l'application pour différents nombres de cœurs.
J'essaie d'expliquer comment ne laisser qu'un seul pour chaque système d'exploitation.
Le nombre de cœurs de chaque tâche est sélectionné par l'utilisateur sur la page de préférences (ou le nombre maximal de BOINC disponibles).
La tâche reçoit la quantité en tant que paramètre d'entrée.

Tout ce mécanisme fonctionne très bien sur des projets avec VBox (via le standard vbox_wrapper)

La tâche sans VBox devrait elle-même définir le paramètre et démarrer le nombre requis de threads.

La seconde est l'exécution de commandes standard BOINC
La tâche de Linux ne s’arrête pas - uniquement en déchargeant le client BOINC lui-même. Ensuite, cela commence dès le début.
Titre: Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: marmot le 07 September 2019 à 01:25
- il faudrait donner des points même en cas d'erreur pour récompenser les temps de calcul très importants (si quelqu'un peut m'expliquer comment faire, je peux bidouiller ça je pense)
. . .
D'autres idées ou recommandations ?
trickle-messages à chaque heure de travail et bonus pour le nombre de cœurs par heure

C'est ce que font le DHEP, Climate Prediction, RNA World et some d'autres projets.  Je pense que BOINC Docker VM a la capacité.  Le WU contacte le serveur avec le rapport d'avancement et l'utilisateur reçoit du crédit par heure avec un crédit supplémentaire par CPU-core utilisé.  Un autre développeur de projet peut-être part le code/algorithmes.
 
Citer
établir des commandes de pause / arrêt et continuer  (Linux native)
points de contrôle et continuation après un arrêt / rechargement

Native Linux version ne laissera pas l'utilisateur la mettre en pause sans le casser?

J'ai un 4 core, 1 GB RAM anti-X Linux (OS a besoin de 256 MB) VM en cours d'exécution sur mon ordinateur portable de test Windows 7.  Je vais l'attacher au projet, voir si elle exécute un WU natif et prendre des notes sur la quantité de RAM utilisé. Je peux faire une pause et enregistrer l'état de mon Linux VM.  Cela peut éviter que la commande de pause WU native ne fonctionne pas (nécessité d'arrêter tous les travaux BOINC en chaleur de l'après-midi pendant l'été; les tarifs d'électricité sont 4fois plus élevés)


Citer
l'application universelle (mt) que j'ai proposée ci-dessus et le choix de préférence du nombre de cœurs (en tant que paramètre de la tâche)

Cela signifie utiliser le maximum intégré WU téléchargé sur une option machine et le maximum CPU-cœurs autorisés option sous les préférences des utilisateurs pour le dernier logiciel serveur BOINC?


Citer
Les 3 OS fonctionnent!!!  :yaya:

 :D

(1 hour to properly translate this from English to French... la sigh)
Titre: Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: MortelKni le 07 September 2019 à 11:14
[...]

Si je fais le point sur les personnes ayant des tâches valides et leur OS :
  • [AF>Libristes] erik - x86_64-pc-linux-gnu
  • Cocagne - x86_64-apple-darwin - x86_64-pc-linux-gnu - windows_x86_64
  • fzs600 - x86_64-pc-linux-gnu - windows_x86_64
  • [AF>Occitania]franky82 - windows_x86_64
  • [AF>Belgique]Mamouth - windows_x86_64
  • Sergey Kovalchuk - x86_64-pc-linux-gnu
  • marmot - windows_x86_64
  • [AF] fansyl - windows_x86_64
  • modesti - x86_64-pc-linux-gnu
  • [AF>Libristes] Pascal - x86_64-pc-linux-gnu
  • [AF>Libristes]MortelKni - x86_64-pc-linux-gnu ???

Les 3 OS fonctionnent!!!  :yaya:

Les tâches n'ont tourné que sur du Windows pour le moment ( cf https://quchempedia.univ-angers.fr/athome/results.php?userid=15 ), je ne sais pas si c'est une erreur de copie ou de remontée d'info ^^

En tout cas bon courage pour la suite, je continuerai à zieuter ça.
Par contre sous Windows c'est hyper compliqué, dès que les applis utilisent une VM, le PC devient inutilisable (jusqu'a être impossible à déverrouiller, obligé de passer par un reset). Je ne sais pas si il y a moyen de passer des arguments à la VBox en disant qu'elle ne peut pas utiliser ses coeurs à plus de 90% par exemple ?

EDIT : Maintenant il va y avoir des tâches sous linux, j'y avait pas pensé mais en mettant une VM sous debian je peux régler direct le % max d'utilisation de VBOX, du coup plus de problèmes !  :hyperbon:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 07 September 2019 à 11:39
Je ne crunche que sur Windows.
Les tâches sont de plus en plus longues :
- avant, je finissais une UT en 10h environ (vbox64_t4),
- maintenant, je dépasse 1 jour et demi et même 4 jours et demi sur une UT vbox64_t1 !
Mais pas de problème, je continue à cruncher sur ce projet pour faire avance le Schmilblick !  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Cocagne le 07 September 2019 à 16:09
Petite erreur je n'ai pas d'unité sous linux dans celles comptées valide par le projet.
Sinon pour rassurer Jéjé sur mac:

https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=6862

C'est long mais ça calcule et ça valide.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 07 September 2019 à 16:14
[...]
- maintenant, je dépasse 1 jour et demi et même 4 jours et demi sur une UT vbox64_t1 !
[...]
Si tu crains les UT longues, ne fais pas de RNA :D J'en ai une qui tourne depuis 40 jours et qui en a encore pour ~10 jours (en VM) ;)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 07 September 2019 à 16:31
Si tu crains les UT longues, ne fais pas de RNA :D J'en ai une qui tourne depuis 40 jours et qui en a encore pour ~10 jours (en VM) ;)
C'est pour ça que j'ai arrêté RNA : c'était bien trop long !  :eek:
(4 - 5 jours max, pour moi)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 08 September 2019 à 13:23
@damotbe et cocagne : m'enfin y'a des des tâches macOS et personne ne m'avait rien dit ??? :cry:

Je teste ça de suite !!

----
Edith : bon ben j'ai récupéré une tâche... à 2 CPU... pourquoi tant de haine ? pourquoi pas 8 ?
----

@marmot : utilises https://www.deepl.com/translator !

@SVojna et les autres : mais combien de RAM la tâche maximum la tâche utiliser *réellement* durant son exécution ?

@damotbe : je comprends bien que le taff fait par un dev, et pas fini, est certainement très compliqué à reprendre... et ce même si on a exactement le même niveau que lui... c'est pas grave, tu fais au mieux, et j'espère que tu trouveras un autre stagiaire !!
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 08 September 2019 à 14:01
@marmot : utilises https://www.deepl.com/translator !
Oui, cause que c'est mieux.  :desole:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Cocagne le 08 September 2019 à 18:03
@damotbe et cocagne : m'enfin y'a des des tâches macOS et personne ne m'avait rien dit ??? :cry:

Je teste ça de suite !!

----
Edith : bon ben j'ai récupéré une tâche... à 2 CPU... pourquoi tant de haine ? pourquoi pas 8 ?
----

@marmot : utilises https://www.deepl.com/translator !

@SVojna et les autres : mais combien de RAM la tâche maximum la tâche utiliser *réellement* durant son exécution ?

@damotbe : je comprends bien que le taff fait par un dev, et pas fini, est certainement très compliqué à reprendre... et ce même si on a exactement le même niveau que lui... c'est pas grave, tu fais au mieux, et j'espère que tu trouveras un autre stagiaire !!

ça veut bétatester et ça surveille pas, pas bien ça!!!!
j'en ai eu qu'à 2 et 4 cores et je préfère personnellement
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 08 September 2019 à 18:34
Je n'ai plus que du t2, ils vont durer largement plus de 2 jours et quasiment tous mes cpus sont à l'arrêt :eek:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 08 September 2019 à 18:47
ça veut bétatester et ça surveille pas, pas bien ça!!!!

(https://i.gifer.com/Ilq.gif)

Citer
j'en ai eu qu'à 2 et 4 cores et je préfère personnellement
Bon pour l'instant ça tourne.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 09 September 2019 à 09:43
Je n'ai plus que du t2, ils vont durer largement plus de 2 jours et quasiment tous mes cpus sont à l'arrêt :eek:

C'est étrange cette affaire ! Comme si l'application avait une préférence pour 2 cœurs en particulier... C'est nouveau ? C'est depuis que l'application n'est plus en VM peut-être ? 

Je ne crunche que sur Windows.
Les tâches sont de plus en plus longues :
- avant, je finissais une UT en 10h environ (vbox64_t4),
- maintenant, je dépasse 1 jour et demi et même 4 jours et demi sur une UT vbox64_t1 !
Mais pas de problème, je continue à cruncher sur ce projet pour faire avance le Schmilblick !  :kookoo:

merci de ton aide. Les temps de calcul dépendent de la molécule testée et les écarts peuvent être impressionnants. Si en plus de celà tu passes de 4 threads (t4) à 1 thread (t1), c'est l'horreur !

Les tâches n'ont tourné que sur du Windows pour le moment ( cf https://quchempedia.univ-angers.fr/athome/results.php?userid=15 ), je ne sais pas si c'est une erreur de copie ou de remontée d'info ^^

En tout cas bon courage pour la suite, je continuerai à zieuter ça.
Par contre sous Windows c'est hyper compliqué, dès que les applis utilisent une VM, le PC devient inutilisable (jusqu'a être impossible à déverrouiller, obligé de passer par un reset). Je ne sais pas si il y a moyen de passer des arguments à la VBox en disant qu'elle ne peut pas utiliser ses coeurs à plus de 90% par exemple ?

EDIT : Maintenant il va y avoir des tâches sous linux, j'y avait pas pensé mais en mettant une VM sous debian je peux régler direct le % max d'utilisation de VBOX, du coup plus de problèmes !  :hyperbon:

Comme tes ordis étaient cachés et vue ta team, j'en avais déduit du Linux  :lol:
Je n'ai pas toujours de remontée d'infos cohérentes avec l'interface d'administration de Boinc...

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 09 September 2019 à 09:54
J'avais effectivement du t8 en VM.
Sinon je ne me souviens plus exactement mais c'est relativement nouveau, quelques jours tout au plus. J'ai eu du t8, puis du t4 et maintenant du t2.
J'ai une t8 prête à démarrer.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 09 September 2019 à 20:32
Bon ben y'a comme un soucis : j'ai eu la tâche hier en début d'après midi, qui tournait depuis le début... et là j'arrive et j'ai toujours une tâche qui tourne soit disant depuis 8h30 et aucun tâche n'a été terminée ni renvoyée... genre soit elle se réinitialise et tourne en boucle, soit elle aurait été suspendue genre 24h et juste elle repart alors que j'arrive ? je n'en crois rien...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 09 September 2019 à 20:48
Bon, mon UT vbox64_t4 a fini en 3 jours... en erreur
et mon UT vbox64_t1 crunche toujours : 6 jours et demi et toujours à 99 % !
Mais la nouvelle UT vbox64_t4 est à 60 % en 8h30 !

Et ça y est, NWChem apparaît enfin sur WUProp (en plus de NWChem VM) !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 09 September 2019 à 22:31
Bon ben voila j'ai craqué, j'ai upgradé mon petit serveur OVH pour un 2 core / 8 Go de RAM... la faute à qui hein la faute à qui ???? :siflotte:

Le prix fait x3 quand même, ça reste raisonnable mais bon, boinc sera ma perte :D

J'ai récupéré illico un wagonnet de tâches, wait & see ;)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 10 September 2019 à 11:10
Pour la documentation des crédits je suis tombé la-dessus : https://boinc.berkeley.edu/trac/wiki/CreditOptions (https://boinc.berkeley.edu/trac/wiki/CreditOptions)

et je me sens pas plus avancé  :priz2tet:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 10 September 2019 à 16:52
Peut-être que l'admin de RNA peut t'aider à ce propos? Ce projet donne aussi des crédits pour des UT finies en erreur de calcul ou abandonnées en cours de route.
Exemple, celle-ci (http://www.rnaworld.de/rnaworld/workunit.php?wuid=6330822)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 10 September 2019 à 20:33
Ayé fini ma première tâche sur minux !! enfin... \o/

Ah oui, comment dire, celle du Mac... elle court toujours !!

(https://i.gifer.com/1Q.gif)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 10 September 2019 à 21:14
Ah oui, comment dire, celle du Mac... elle court toujours !!
Mon UT vbox64_t1 aussi !  :priz2tet:
#sansfin
Titre: Re : Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: marmot le 11 September 2019 à 00:12

Par contre sous Windows c'est hyper compliqué, dès que les applis utilisent une VM, le PC devient inutilisable (jusqu'a être impossible à déverrouiller, obligé de passer par un reset). Je ne sais pas si il y a moyen de passer des arguments à la VBox en disant qu'elle ne peut pas utiliser ses coeurs à plus de 90% par exemple ?


Si vous dites à BOINC Manager de n'utiliser que 90% du CPU (vue avancée : options -> préférences de calcul -> calcul -> utiliser au maximum), il devrait passer ce pourcentage sur la machine virtuelle.  Vous pouvez confirmer en ouvrant la boîte virtuelle, en cliquant sur la VM de NWChem et en regardant Paramètres -> Capuchon d'exécution.  C'est l'un des rares paramètres qui peuvent être modifiés pendant le fonctionnement de la VM.  Vous pourriez être en mesure de contrôler manuellement cela et de ne pas interrompre l'exécution de WU.

Traduit avec www.DeepL.com/Translator

Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: marmot le 11 September 2019 à 01:40
Pour la documentation des crédits je suis tombé la-dessus : https://boinc.berkeley.edu/trac/wiki/CreditOptions (https://boinc.berkeley.edu/trac/wiki/CreditOptions)

et je me sens pas plus avancé  :priz2tet:
DHEP, Climate Prediction, RNA World (boîte virtuelle) et d'autres projets ont déjà permis d'accumuler des crédits.  Pas besoin de réinventer la roue, peut-être qu'un des administrateurs/devs offrira la solution gratuitement ?

Je n'ai plus que du t2, ils vont durer largement plus de 2 jours et quasiment tous mes cpus sont à l'arrêt :eek:

C'est étrange cette affaire ! Comme si l'application avait une préférence pour 2 cœurs en particulier... C'est nouveau ? C'est depuis que l'application n'est plus en VM peut-être ? 


J'ai réglé ma VM Linux antiX faite à la main sur 2 cœurs, 4 cœurs et 8 cœurs et j'ai redémarré la machine.  Enregistré tous les détails du fichier client_state.xml au fur et à mesure que les WU's arrivaient (et ont été annulés parce que c'était une expérimentation).  A 2 coeurs, le serveur avait tendance à envoyer des paires de 1 coeurs WU's.  A 4 coeurs, le serveur envoyait une paire de 2 coeurs mais parfois 4 coeurs.  A 8 cœurs,  le serveur envoyait toujours 8 cœur WU's. (mais mon expérimentation a été limitée. Les résultats de l'ensemble de données de client_state.xml affichés à la fin).


@marmot : utilises https://www.deepl.com/translator !
Merci, ça a mieux fonctionné bien qu'il ait eu des problèmes avec l'utilisation des mots en informatique (threads, cores, a continué d'essayer de donner au serveur ou à VM un genre masculin au lieu d'un genre non sexiste).   Aussi que le mot "experiment" n'est proposé qu'à titre "d'expérience" ou "d'expérimentation" pour une raison idiote.


@SVojna et les autres : mais combien de RAM la tâche maximum la tâche utiliser *réellement* durant son exécution ?

Chaque thread nwchem commence avec 146 MiB dans ma distribution linux.  Il est passé à 156 Mo par thread après 1 heure.  (J'ai arrêté l'expérience après 1 heure et je ferai d'autres tests dans 2 jours après que les WU Windows NWChem seront terminés.)  Chaque thread réclame 1.2GiB de mémoire pour une utilisation potentielle.  Il faudra encore de nombreux jours pour regarder les threads WU afin de voir quelle RAM maximale ils prennent réellement. 

L'emballage NWchem vérifie si vous avez 2048 Mio disponibles pour BOINC et ne négocier. 
J'ai été capable d'obtenir l'antiX VM pour exécuter NWchem à des réglages minimal 2112 MiB RAM dans la Virtual Box ; bien que la RAM maximale utilisée pour l'heure n'ait jamais dépassé 700MiB sur 4 threads NWchem.

Traduit avec www.DeepL.com/Translator

-----------------
Voici donc les résultats de client_state.xml (extrait des informations superflues). 
Remarquez comment la <classe_plan>t1</classe_plan> se poursuit accepte
<cmdline>-t4</cmdline>
ou
<cmdline>-t2</cmdline> ?

@damotbe, La classe de plan t1 avec les options cmdline est en concurrence avec les classes de plan t2 et t4 ?


<app_version>
    <app_name>nwchem</app_name>
<version_num>6</version_num>
    <platform>x86_64-pc-linux-gnu</platform>
    <avg_ncpus>1.000000</avg_ncpus>
    <plan_class>t1</plan_class>
 
    <file_ref>
        <file_name>nwchem_t1_worker_0.6.sh</file_name>
        <open_name>worker.sh</open_name>
        <copy_file/>
    </file_ref>
</app_version>

<app_version>
    <app_name>nwchem</app_name>
    <avg_ncpus>2.000000</avg_ncpus>
    <plan_class>t1</plan_class>
    <cmdline>-t2</cmdline>

    <file_ref>
        <file_name>nwchem_t1_worker_0.6.sh</file_name>
        <open_name>worker.sh</open_name>
        <copy_file/>
    </file_ref>
</app_version>

<app_version>
    <app_name>nwchem</app_name>
    <avg_ncpus>4.000000</avg_ncpus>
    <plan_class>t1</plan_class>
    <cmdline>-t4</cmdline>

    <file_ref>
        <file_name>nwchem_t1_worker_0.6.sh</file_name>
        <open_name>worker.sh</open_name>
        <copy_file/>
    </file_ref>
</app_version>

<app_version>
    <app_name>nwchem</app_name>
    <avg_ncpus>2.000000</avg_ncpus>
    <plan_class>t2</plan_class>
   
<file_ref>
        <file_name>nwchem_t2_worker_0.6.sh</file_name>
        <open_name>worker.sh</open_name>
        <copy_file/>
    </file_ref>
</app_version>

<app_version>
    <app_name>nwchem</app_name>
    <avg_ncpus>4.000000</avg_ncpus>
    <plan_class>t4</plan_class>
     
<file_ref>
        <file_name>nwchem_t4_worker_0.6.sh</file_name>
        <open_name>worker.sh</open_name>
        <copy_file/>
    </file_ref>
</app_version>

<app_version>
    <app_name>nwchem</app_name>
    <avg_ncpus>8.000000</avg_ncpus>
    <plan_class>t8</plan_class>
   
<file_ref>
        <file_name>nwchem_t8_worker_0.6.sh</file_name>
        <open_name>worker.sh</open_name>
        <copy_file/>
    </file_ref>

    <file_ref>
        <file_name>nwchem_vm_0.3.vdi</file_name>
    </file_ref>
</app_version>

-------------

Même avec https://www.deepl.com/translator ce message était difficile parce que deepl ne comprend pas l'usage spécifique des mots à partir des indices contextuels dont nous parlons en informatique.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 11 September 2019 à 10:45
Oui là il est clair qu'on a sur un vocabulaire très "pointu" sur un sujet "de niche", mais pour des gens qui "parlent l'informatique", donc on ne peut pas s'attendre qu'un traducteur "universel" s'en sorte facilement, nous n'utilisons même pas exactement les mêmes mots pour les mêmes concepts entre nous :)

Mais ne t'inquiète pas on te comprend bien !

Merci pour tous les détails que tu fournis, j'espère que ça pourra aider damotbe et son futur stagiaire :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 12 September 2019 à 08:01
Hier mon ordi a renvoyé 1 tache.(t2)
Le temps de CPU est très inférieur au temps écoulé  cocoricooo

https://quchempedia.univ-angers.fr/athome/result.php?resultid=7998

J'ai regardé les propriétés des tâches en cours: même phénomène.
En voici une:


Application
NWChem 0.06 (t2)
Nom
dsgdb9nsd_nwchem,bath19,dsgdb9nsd_062081,nwchem,1567213400
État
Calculs en cours
Reçu
jeu. 05 sept. 2019 01:40:13 CEST
Date limite d'envoi
jeu. 19 sept. 2019 01:40:12 CEST
Ressources
2 CPUs
Taille de tâche estimée
500 000 GFLOPs
Temps de calcul
21:28:23
CPU time since checkpoint
21:28:23
Temps écoulé
6d 03:56:59
Temps restant estimé
00:08:30
Portion effectuée
99,904%
Taille de la mémoire virtuelle
1,90 GB
Espace mémoire alloué
230,38 MB
Répertoire
slots/12
ID du process
6701
Taux de progression
0,720% par heure
Exécutable
wrapper_26014_x86_64-pc-linux-gnu
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 12 September 2019 à 08:54
Merci à tous pour vos retours et votre patience sur ce projet encore très expérimental. Nous venons de passer les 300 résultats exploitables grâce à votre aide ! C'est génial  :love:

Peut-être que l'admin de RNA peut t'aider à ce propos? Ce projet donne aussi des crédits pour des UT finies en erreur de calcul ou abandonnées en cours de route.
Exemple, celle-ci (http://www.rnaworld.de/rnaworld/workunit.php?wuid=6330822)
DHEP, Climate Prediction, RNA World (boîte virtuelle) et d'autres projets ont déjà permis d'accumuler des crédits.  Pas besoin de réinventer la roue, peut-être qu'un des administrateurs/devs offrira la solution gratuitement ?

Oui, il va falloir aller demander de l'aide à ceux qui connaissent une solution en espérant que la personne qui a mis en place soit toujours là. En attendant, c'est la rentrée universitaire depuis quelques jours déjà et j'ai du mal à mener tous les fronts  :pt1cable:

Hier mon ordi a renvoyé 1 tache.(t2)
Le temps de CPU est très inférieur au temps écoulé  cocoricooo

https://quchempedia.univ-angers.fr/athome/result.php?resultid=7998

Oui, ça rejoint tes autres screenshots : plusieurs tâches bloquées sur les 2 mêmes cœurs. Du coup, elles s'alternent et le temps CPU (réellement utilisé) devient très différent du temps passé. J'ai croisé Théo, on va essayer de se voir et discuter des différents sujets.

@damotbe, La classe de plan t1 avec les options cmdline est en concurrence avec les classes de plan t2 et t4 ?

Je pense que oui. Peut-être que Théo pourra me confirmer.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 12 September 2019 à 15:04
Bon alors ma tâche Mac (https://quchempedia.univ-angers.fr/athome/result.php?resultid=8326) s'est finalement terminée : 2j 18h de durée pour 3j 2h de temps CPU !! Car c'était une UT 2 cores, on est donc loin du compte, le CPU semble très sous-utilisé.

Et sur ma VM minux (*) en réalité augmentée j'en ai déjà fini 4 (https://quchempedia.univ-angers.fr/athome/results.php?hostid=34) en 2C aussi (mais là, j'ai pas le choix) mais là où ça devient très curieux c'est qu'une seule a un ratio cohérent durée / temps CPU (x2) et la 3 autres ont la même durée pour les deux...

tâche   durée   temps CPU
8265   17,7   33,2
8318   23,1   23,1
8391   34,6   34,6
8411   22,3   22,3

(*) je n'utilise pas minux (https://sourceforge.net/projects/minux/), c'est juste une référence culturelle :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 12 September 2019 à 15:25
Je pense que le code nwChem n'est pas toujours bien parallélisé et comme il y a de nombreuses étapes avec des durées très différentes d'un calcul à l'autre, on a parfois des cas un peu extrême comme ça.
De mon point de vue, le plus efficace c'est 1 thread, mais par contre c'est très long... Si on met plus de thread on prend le risque de sous-utilisation  :/

C'est vraiment pas top comme software comparativement au logiciel propriétaire qu'on utilise en privé...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 12 September 2019 à 15:26
Minix ?
[HS]
https://linuxfr.org/news/entretien-avec-andrew-tanenbaum-a-propos-de-minix (https://linuxfr.org/news/entretien-avec-andrew-tanenbaum-a-propos-de-minix)
[HS]
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 13 September 2019 à 18:57
Noooo...

Citer
Bonjour minux (*)
- Allez y monsieur, posez votre question.
- J'ai pas de questions, c'est pour dire a René qu'il aille directement chez zezette, parsque comme j'ai pommé les clés du camions j'vais être perdu pour ouvrir les portes de l'armoire...
- Vous pouvez le dire a monsieur, simone...
- Candidat suivant, c'est monsieur?
- C'est papi Moujooooos
(*) à la réflexion il dit ptet "milux" mais c'est pas grave depuis ma jeunesse j'entends "minux" :)

Sinon c'est une débian :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 14 September 2019 à 11:17
 :hello:

Grâce à vos calculs, on a identifié quelques stratégies pour améliorer la situation :
- rendre les critères de convergence moins stricts, ce qui devrait (considérablement ?) accélérer les calculs.
- enlever une étape du calcul, source de beaucoup de bugs et gain de temps à la clé
- uniquement des applications 1 cpu pour ne pas réserver inutilement des cœurs qui restent souvent inutilisés.

Les temps de calculs resteront longs mais on devrait gaspiller moins et avoir plus souvent des succès.

Points en attente :
- on reste sur environ 2Go de mémoire. On manque de recul pour savoir si les molécules plus grandes poseront problème avec moins.
- pour les points, je vais demander de l'aide sur d'autres forums quand j'aurai un peu de temps
- pour les badges, on est toujours open à des contributions. Pour la première phase de test, on compte attribuer un badge spécial pour récompenser les efforts !

Par conséquent, on devra annuler et soumettre des nouvelles unités peut-être à plusieurs reprises dans les jours/semaines à venir.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 14 September 2019 à 13:21
Merci damotbe, de nous faire vivre la naissance de ce projet !
Superbe !
Je suis vraiment désolé de n'avoir pas réussi à calculer des WUs pour contribuer à la mise au point de ce projet.
Avec de pareilles ram nécessaires, je ne pourrai de toute façon que faire des calculs avec la machine que je projette de me procurer dans quelques mois.
Mais je serai là moi aussi pour QuChemPedIA dès que possible...

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 14 September 2019 à 19:50
J'ai finalisé mon premier essai de badges pour QuChemPedIA et je vous le soumets !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 14 September 2019 à 20:33
J'ai finalisé mon premier essai de badges pour QuChemPedIA et je vous le soumets !

C'est vraiment top, j'aime beaucoup !
Est-ce que tu aurais une idée pour ajouter le côté chimie ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 14 September 2019 à 20:36
J' y avais pensé mais ça fait chargé... (ça rend bien en grand mais dès qu'on réduit...)
mais je vais essayer d'autres idées !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 14 September 2019 à 22:02
J' y avais pensé mais ça fait chargé... (ça rend bien en grand mais dès qu'on réduit...)
mais je vais essayer d'autres idées !

au fait, c'est pourquoi le 'W' ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 14 September 2019 à 23:04
Le W, c'est pour le Pedia (Wiki) !  :kookoo:

2ème version de badges avec chimie !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 14 September 2019 à 23:26
sympa, mais en 20x20 pixels ça donne quoi?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 15 September 2019 à 06:47
Je sens que celles qui me reste vont toutes finir comme ça (j'hésite à les tuer on ne sais jamais):

https://quchempedia.univ-angers.fr/athome/result.php?resultid=8001

Fin de l'épisode multithreads  :priz2tet:  :pt1cable:

Ça devrait aller mieux maintenant  :)

EDIT: j'ai chargé de nouvelles tâches et c'est encore des t2 et j'ai toujours le même bug:
toutes les tâches sur la même paire de cpus :spamafote:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 15 September 2019 à 09:11
sympa, mais en 20x20 pixels ça donne quoi?
28x28 pixels : effectivement, ça fait trop chargé : je vais faire une autre version plus légère !
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 15 September 2019 à 09:19
sympa, mais en 20x20 pixels ça donne quoi?
28x28 pixels : effectivement, ça fait trop chargé : je vais faire une autre version plus légère !

L'idée est là en tout cas. Pour alléger enlève le 'W' et même le 'IA' si nécessaire. Une molécule simple : H20
Voilà quelques idées en vrac ! J'aimerais bien avoir ton talent d'artiste en tout cas.

@Erik. Théo n'est plus en stage mais va essayer de nous dépanner ponctuellement, je ne sais pas quand il aura le temps de faire les réglages et me montrer. la coupure de cet été nous a fait perdre 3 semaines sur le planning et on paye ça maintenant  :(
Titre: Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 15 September 2019 à 11:26
@Erik. Théo n'est plus en stage mais va essayer de nous dépanner ponctuellement, je ne sais pas quand il aura le temps de faire les réglages et me montrer. la coupure de cet été nous a fait perdre 3 semaines sur le planning et on paye ça maintenant  :(
:jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 16 September 2019 à 11:41
Hop, 3ème version allégée des badges !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 16 September 2019 à 14:12
L'AF n'a pas créé de compte ou c moi qui ne trouve pas?  :??:
Sublime la 2ème ligne pour mon point de vu perso. bravo pour les propositions de tes badges  :jap:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 16 September 2019 à 16:23
L'AF n'a pas créé de compte ou c moi qui ne trouve pas?  :??:
C'est exact.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 16 September 2019 à 21:24
Alors en effet ma VM linux crunche 2 tâches mono core en parallèle maintenant... c'était bien la peine que je passe sur un bi-core :lol:

Mais bon côté mémoire ça serait pas passé, donc c'était pas inutile.


Côté badge : franky ils sont sympathiques et tout mais je trouve que tu les fais en calquant l'esprit des badges spéciaux de RAID AF (forme, succession de couleurs), je pense que ça prête à confusion. Pour des badges projet je pense qu'il est possible de se permettre plus de fantaisie tant sur la forme du badge que ses couleurs, non ? What do you think people ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 16 September 2019 à 21:32
Côté badge : franky ils sont sympathiques et tout mais je trouve que tu les fais en calquant l'esprit des badges spéciaux de RAID AF (forme, succession de couleurs), je pense que ça prête à confusion. Pour des badges projet je pense qu'il est possible de se permettre plus de fantaisie tant sur la forme du badge que ses couleurs, non ? What do you think people ?
Effectivement, mes propositions sont un peu monochromes (enfin bichrome - noir et blanc - hormis le fond) et je vais essayer des badges plus originaux en formes et en couleurs ! #défi
Le problème, c'est que j'arrive à faire des trucs sympas en 120x120 pixels mais quand on réduit à 28x28 pixels, on ne voit plus rien (fouillis)...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 16 September 2019 à 22:05
Mais on est sûr de cette norme 28x28 ? parce que je voudrais pas dire mais y'a des projets qui s'en écartent gaiement !!
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 16 September 2019 à 22:22
28x28, c'est la taille d'affichage sur statseb !

Hop, une autre idée plus colorée ou les badges ont la forme du cerveau à gauche, des connecteurs électroniques à droite et une molécule au centre...
le tour est transparent (PNG) et la couleur des badges est uniquement à l'intérieur du badge !
(Les 2 images sont les mêmes badges mais plus petits dans la deuxième)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 16 September 2019 à 23:05
Chez Seb c'est 20x20 il me semble, pas 28x28  cocoricooo
A part ça, chapeau bas pour tes badges, ils sont magnifiques ! :love:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 16 September 2019 à 23:49
Ah ben voila, elle déchire cette série !!! :D
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 17 September 2019 à 07:45

A part ça, chapeau bas pour tes badges, ils sont magnifiques ! :love:
:love: :miam: :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 17 September 2019 à 07:58
C'est vrai qu'ils sont beaux !  :love:

Par contre, je pensais que c'était simple comme il y a une interface web pour les ajouter... mais après quelques essais, je n'ai pas réussi.  :(
Rien n'est simple avec ce bouzin  :priz2tet:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 17 September 2019 à 09:44
C'est vrai qu'ils sont beaux !  :love:

Par contre, je pensais que c'était simple comme il y a une interface web pour les ajouter... mais après quelques essais, je n'ai pas réussi.  :(
Rien n'est simple avec ce bouzin  :priz2tet:

 :winner2:
Bon, j'ai un badge assignable, c'est un début !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 17 September 2019 à 10:16
Chez Seb c'est 20x20 il me semble, pas 28x28  cocoricooo
Pourtant, pour les Raid, j'avais fait du 28x28 !

A part ça, chapeau bas pour tes badges, ils sont magnifiques ! :love:
Ah ben voila, elle déchire cette série !!! :D

A part ça, chapeau bas pour tes badges, ils sont magnifiques ! :love:
:love: :miam: :jap:
C'est vrai qu'ils sont beaux !  :love:
Merci à tous !  :jap: 
Est-ce qu'on les garde ? Est-ce que je fais des modifs ?  N'y a-t-il pas de concurrent pour en proposer d'autres ?  :kookoo:
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 17 September 2019 à 10:40
Chez Seb c'est 20x20 il me semble, pas 28x28  cocoricooo
Pourtant, pour les Raid, j'avais fait du 28x28 !

A part ça, chapeau bas pour tes badges, ils sont magnifiques ! :love:
Ah ben voila, elle déchire cette série !!! :D

A part ça, chapeau bas pour tes badges, ils sont magnifiques ! :love:
:love: :miam: :jap:
C'est vrai qu'ils sont beaux !  :love:
Est-ce qu'on les garde ?
Oui.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 17 September 2019 à 10:48
Oui, pour l'instant j'ai découpé le badge beta qui est donc déployé : https://quchempedia.univ-angers.fr/athome/img/beta1.png (https://quchempedia.univ-angers.fr/athome/img/beta1.png)

Je vais essayer de me l'attribuer pour comprendre la mécanique du bouzin  :miam:
Mais ce sera après mes cours... enseignant-chercheur !

EDIT : j'ai mis du 120x120, ils sont trop beaux comme ça !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 17 September 2019 à 16:52
J'ai réussi !!!!  :kermit:

Bon bah distribution semi-manuelle  en cours  :sun:


EDIT : it works !!!!!!! badge pour tous les utilisateurs avec crédit > 0  :smak:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 17 September 2019 à 17:12
:yaya:
Merci damotbe :jap:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 17 September 2019 à 18:52
:yaya:
Merci damotbe :jap:
:+1:   :bounce:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 18 September 2019 à 10:32
Maintenant que j'ai compris la partie badge, les badges pour le crédit sont en place !  :hyperbon: :hyperbon: :hyperbon:

EDIT :  si vous constatez des bugs, n'hésitez pas à me faire un retour. Normalement, une tâche journalière affecte les badges, il faut donc attendre au pire 24h après un jalon pour obtenir le badge.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 18 September 2019 à 10:33
Merci damotbe !
J'espère décrocher un badge un de ces jours...

 :jap:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 18 September 2019 à 10:37
Merci damotbe !
J'espère décrocher un badge un de ces jours...

 :jap:

Moi pendant ce temps là, je ne fais plus de Collatz (sauf à la maison) :blbl:
Dommage qu'on ait trop besoin des 4 x 2080Ti en ce moment  :gniak:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 18 September 2019 à 10:44
Maintenant que j'ai compris la partie badge, les badges pour le crédit sont en place !  :hyperbon: :hyperbon: :hyperbon:
Super !  :bipbip:

Il ne manque plus que la team AF soit créée et que les résultats apparaissent dans les stats sur statseb ou SETIBZH !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 18 September 2019 à 10:58
Maintenant que j'ai compris la partie badge, les badges pour le crédit sont en place !  :hyperbon: :hyperbon: :hyperbon:
Super !  :bipbip:

Il ne manque plus que la team AF soit créée et que les résultats apparaissent dans les stats sur statseb ou SETIBZH !
:+1:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 18 September 2019 à 11:22
Vu que le projet n'utilise plus de VM avec la dernière appli, je me suis dit que j'allais le rejoindre dans ma VM Windows aussi. Voilà les messages que j'ai eus:
Citer
18/09/2019 11:19:15 | QuChemPedIA@home | Master file download succeeded
18/09/2019 11:19:21 | QuChemPedIA@home | Sending scheduler request: Project initialization.
18/09/2019 11:19:21 | QuChemPedIA@home | Requesting new tasks for CPU
18/09/2019 11:19:22 | QuChemPedIA@home | Scheduler request completed: got 0 new tasks
18/09/2019 11:19:22 | QuChemPedIA@home | No tasks sent
18/09/2019 11:19:22 | QuChemPedIA@home | Message du serveur: VirtualBox is not installed

Juste pour info. Il y a probablement un truc à changer dans le code....
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 18 September 2019 à 11:41
Maintenant que j'ai compris la partie badge, les badges pour le crédit sont en place !  :hyperbon: :hyperbon: :hyperbon:
Super !  :bipbip:

Il ne manque plus que la team AF soit créée et que les résultats apparaissent dans les stats sur statseb ou SETIBZH !

j'ai importé toutes les teams, dont l'AF, vous pouvez vous inscrire !  :sun:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 18 September 2019 à 11:46
Vu que le projet n'utilise plus de VM avec la dernière appli, je me suis dit que j'allais le rejoindre dans ma VM Windows aussi. Voilà les messages que j'ai eus:
Citer
18/09/2019 11:19:15 | QuChemPedIA@home | Master file download succeeded
18/09/2019 11:19:21 | QuChemPedIA@home | Sending scheduler request: Project initialization.
18/09/2019 11:19:21 | QuChemPedIA@home | Requesting new tasks for CPU
18/09/2019 11:19:22 | QuChemPedIA@home | Scheduler request completed: got 0 new tasks
18/09/2019 11:19:22 | QuChemPedIA@home | No tasks sent
18/09/2019 11:19:22 | QuChemPedIA@home | Message du serveur: VirtualBox is not installed

Juste pour info. Il y a probablement un truc à changer dans le code....

la dernière appli n'utilise plus de VM sous Linux. Sous Windows et MAC, ce sont des VM pour le moment
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 18 September 2019 à 12:02
j'ai importé toutes les teams, dont l'AF, vous pouvez vous inscrire !  :sun:
:yaya:
AF rejointe :D

la dernière appli n'utilise plus de VM sous Linux. Sous Windows et MAC, ce sont des VM pour le moment
:etmerde: Merci pour la piqûre de rappel, damotbe. Je resterai donc uniquement sous Nunux pour l'instant.
Titre: Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 18 September 2019 à 12:08
j'ai importé toutes les teams, dont l'AF, vous pouvez vous inscrire !  :sun:
AF rejointe mais quand on va sur la page de la team (https://quchempedia.univ-angers.fr/athome/team_display.php?teamid=4), il n'y a qu'un membre, @damotbe !

[Edit]Le problème est, maintenant, résolu ! [/Edit]
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 18 September 2019 à 15:06
:bounce:

Petite question: c'est quoi les seuils pour les badges?
bronze 10k
argent 100k
or 1M? (vu qu'erik ne l'a pas encore avec ses 700k+)
ensuite?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 18 September 2019 à 15:29
:bounce:

Petite question: c'est quoi les seuils pour les badges?
bronze 10k
argent 100k
or 1M? (vu qu'erik ne l'a pas encore avec ses 700k+)
ensuite?

Bronze 10k
Argent 100k
Or 1M
Ruby 10M
Émeraude 100M
Saphir 1B

Après, je peux faire des badges intermédiaires avec des chevrons ou des étoiles pour des paliers supplémentaires à partir de 1M
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 18 September 2019 à 19:42
C'est bien avec les intermédiaires et les étoiles oui!!  :jap:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 18 September 2019 à 19:48
C'est bien avec les intermédiaires et les étoiles oui!!  :jap:
ça veut dire qu'il faut que je fasse des modifs ?
Combien d'étoiles pour niveaux intermédiaires à partir de 1M ? (or - or+1 - or+2 ... / ruby - ruby+1 - ruby +2...)
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 18 September 2019 à 20:01
C'est bien avec les intermédiaires et les étoiles oui!!  :jap:
ça veut dire qu'il faut que je fasse des modifs ?
Combien d'étoiles pour niveaux intermédiaires à partir de 1M ? (or - or+1 - or+2 ... / ruby - ruby+1 - ruby +2...)
Ça risque de surcharger la bête (le badge) non ?  :siflotte:
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 18 September 2019 à 20:05
:bounce:

Petite question: c'est quoi les seuils pour les badges?
bronze 10k
argent 100k
or 1M? (vu qu'erik ne l'a pas encore avec ses 700k+)
ensuite?

Tu pourras rajouter des badges si on dépasse dans le futur les 1B?

Bronze 10k
Argent 100k
Or 1M
Ruby 10M
Émeraude 100M
Saphir 1B

Après, je peux faire des badges intermédiaires avec des chevrons ou des étoiles pour des paliers supplémentaires à partir de 1M
Titre: Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 18 September 2019 à 20:24
Ça risque de surcharger la bête (le badge) non ?  :siflotte:
Pas forcément, on peut ajouter 1 à 3 étoiles !

Tu pourras rajouter des badges si on dépasse dans le futur les 1B?
Bien sûr, on peut prévoir des couleurs au-delà de 1B mais je crois qu'on est tranquille pour un moment, pour l'instant !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 18 September 2019 à 20:40
Avec les étoiles c'est  :love: :love: aussi.
Titre: Re : Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 18 September 2019 à 20:51
Ça risque de surcharger la bête (le badge) non ?  :siflotte:
Pas forcément, on peut ajouter 1 à 3 étoiles !

Tu pourras rajouter des badges si on dépasse dans le futur les 1B?
Bien sûr, on peut prévoir des couleurs au-delà de 1B mais je crois qu'on est tranquille pour un moment, pour l'instant !

Je peux toujours ajouter des badges dans le futur. C'est assez simple quand on a pigé le truc (qui est pas super bien documenté).

Avec les étoiles c'est top aussi !

Deux paliers intermédiaires ? (on va être de vrais généraux !)
10k 20k 50K
100k 200k 500k
1M 2M 5M
10M 20M 50M
100M 200M 500M
1B 2B 5B
Titre: Re : Re : Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 18 September 2019 à 21:01
Je peux toujours ajouter des badges dans le futur. C'est assez simple quand on a pigé le truc (qui est pas super bien documenté).

Avec les étoiles c'est top aussi !

Deux paliers intermédiaires ? (on va être de vrais généraux !)
10k 20k 50K
100k 200k 500k
1M 2M 5M
10M 20M 50M
100M 200M 500M
1B 2B 5B
Ah, on mets des étoiles aussi à partir de 10k ?  :hap:
Je croyais qu'on commençait à partir de 1M (d'où l'exemple du badge or) !  :desole:
Pas de problème, je me penche dessus d'ici la fin de la semaine (demain, je suis un peu occupé)...
Si, avec les étoiles, on va jusqu'à 5B, on va peut-être attendre pour rajouter des couleurs !  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 18 September 2019 à 21:32
Va falloir trouver la fonction qui n'affiche que le badge le plus élevé obtenu :lol:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 18 September 2019 à 21:38
Va falloir trouver la fonction qui n'affiche que le badge le plus élevé obtenu :lol:
Sinon on fait comme sur RakeSearch : on collectionne tous les badges !  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 18 September 2019 à 22:05
non tout les badges ça fait trop lourd. Seulement le plus élevé... Direct on voit son niveau  :gniak:
Titre: Re : Re : Re : Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 18 September 2019 à 22:23
Je peux toujours ajouter des badges dans le futur. C'est assez simple quand on a pigé le truc (qui est pas super bien documenté).

Avec les étoiles c'est top aussi !

Deux paliers intermédiaires ? (on va être de vrais généraux !)
10k 20k 50K
100k 200k 500k
1M 2M 5M
10M 20M 50M
100M 200M 500M
1B 2B 5B
Ah, on mets des étoiles aussi à partir de 10k ?  :hap:
Je croyais qu'on commençait à partir de 1M (d'où l'exemple du badge or) !  :desole:
Pas de problème, je me penche dessus d'ici la fin de la semaine (demain, je suis un peu occupé)...
Si, avec les étoiles, on va jusqu'à 5B, on va peut-être attendre pour rajouter des couleurs !  :D

Tu as raisons, mon affaire est pas très utile. Alors disons:
10k
100k
1M 2M 5M
10M 20M 50M
100M 200M 500M
1B 2B 5B

Avec un aspect visuel bien distinctif pour qu'on voit bien l'évolution (bordures? couleurs? chevrons ?)

EDIT : Si j'ai bien compris c'est assez simple de ne garder que le meilleur badge, reste à savoir s'il faut faire ça subtilement  :cavachier:
Titre: Re : Re : Re : Re : Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 18 September 2019 à 22:54
Tu as raisons, mon affaire est pas très utile. Alors disons:
10k
100k
1M 2M 5M
10M 20M 50M
100M 200M 500M
1B 2B 5B

Avec un aspect visuel bien distinctif pour qu'on voit bien l'évolution (bordures? couleurs? chevrons ?)

EDIT : Si j'ai bien compris c'est assez simple de ne garder que le meilleur badge, reste à savoir s'il faut faire ça subtilement  :cavachier:
Je vais mettre les étoiles de la même couleur que le badge (comme l'exemple or) :
- or - 1 étoile or - 2 étoiles or,
- rubis - 1 étoile rubis - 2 étoiles rubis,
-émeraude - 1 étoile émeraude - 2 étoiles émeraude,
- saphyr - 1 étoile saphyr - 2 étoiles saphyr.
Titre: Re : Re : Re : Re : Re : Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 19 September 2019 à 07:45

Je vais mettre les étoiles de la même couleur que le badge (comme l'exemple or) :
- or - 1 étoile or - 2 étoiles or,
- rubis - 1 étoile rubis - 2 étoiles rubis,
-émeraude - 1 étoile émeraude - 2 étoiles émeraude,
- saphyr - 1 étoile saphyr - 2 étoiles saphyr.

Tu crois qu'on remarquera bien les étoiles en petit ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 19 September 2019 à 09:19
Peut-être en les faisant dans une couleur contrastante?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 19 September 2019 à 10:01
Je peux faire les étoiles dans la couleur du badge supérieur :
- rubis pour or...
Il n'y a que pour le badge saphyr qu'il faut que je prévois la couleur éventuelle du badge supérieur (10 B) !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 19 September 2019 à 10:17
Je peux faire les étoiles dans la couleur du badge supérieur :
- rubis pour or...
Il n'y a que pour le badge saphyr qu'il faut que je prévois la couleur éventuelle du badge supérieur (10 B) !

Je dirais bien diamant, donc blanc  :D
encore :smak: pour les badges
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 19 September 2019 à 12:18
Que d’effervescence ! Badge love ! Equipe rejointe !

Va falloir faire du lobbying pour que tout ça apparaisse dans nos sites de stats chéris :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 19 September 2019 à 14:58
J'ai rendu obsolète toutes les applications t2 et t4. D'ici quelques jours, vous ne devriez plus avoir que des t1. Normalement, les ressources CPU seront mieux utilisés mais les calculs seront longs.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 19 September 2019 à 15:12
Il me reste 9 tâches en t4 pour la semaine prochaine, mais l'ordi s'est gavé de SRBase (qui ont très mal évalué le temps de calcul - prévision: 15 minutes, réel: 1h +- 15 min) qui sont pour demain.
Tu veux que je les annule ou je laisse courir?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 19 September 2019 à 15:24
J'ai 12 t2 en cours plus d'autres prêtes à démarrer. Il faut les annuler ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 19 September 2019 à 15:30
C'est surtout pour vous, pour vous éviter de bloquer trop de cœur inutilement. Donc oui, si ça vous gène
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 19 September 2019 à 15:31
J'ai rendu obsolète toutes les applications t2 et t4. D'ici quelques jours, vous ne devriez plus avoir que des t1. Normalement, les ressources CPU seront mieux utilisés mais les calculs seront longs.
J'ai encore quelques taches T2 et T4 qui n'en finissent pas...
alors les T1, ça va être vraiment long à cruncher !
Ça va être dur d'arriver au badge saphir (1 B) !  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: MortelKni le 19 September 2019 à 19:56
 :kookoo:

J'ai 4 tâches T1 sur la VM linux qui ont pris le relai des t4, sauf que ces 4 tâches n'utilisent qu'un seul coeur à 100%. Quelqu'un à une idée du pourquoi du comment ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 19 September 2019 à 20:06
C'est ce qui m'arrive avec mes t2 sous linux, toutes les taches ne prennent qu'une seule paire de threads.
depuis que j'en ai rechargé il semblerait que 4 threads pour 12 tâches soient utilisés mais c'est dur à voir je n'ai pas que ce projet.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 19 September 2019 à 20:25
Vous êtes tous les deux avec des VM linux ?
Ou Erik tu es en direct sur Linux ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 19 September 2019 à 20:28
Je suis en direct avec un ubuntu 16.04
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 19 September 2019 à 21:01
En jetant en œil au moniteur système avec  :
Citer
   AuthenticAMD
AMD FX(tm)-8350 Eight-Core Processor [Family 21 Model 2 Stepping 0]
(8 processeurs)    NVIDIA GeForce GTX 780 Ti (3016MB) driver: 390.11 OpenCL: 1.2    Linux Ubuntu
Ubuntu 18.04.3 LTS [4.15.0-62-generic|libc 2.27 (Ubuntu GLIBC 2.27-3ubuntu1)]
J'ai 2 cœurs a 100% et les 6 autres a 10%. 
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 19 September 2019 à 21:15
J'ai lancé 8 t1 sur un autre ordi (I7 ubuntu 18.04):
2 threads pour 8 tâches
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 19 September 2019 à 21:19
Il prend les vieilles rougnes ce projet ? J'ai un Q6600 (http://www.cpu-world.com/CPUs/Core_2/Intel-Core%202%20Quad%20Q6600%20HH80562PH0568M%20(BX80562Q6600).html) (cherchez pas, c'est du 12 ans d'âge(https://forum-images.hardware.fr/images/perso/9/stukka.gif)) avec 2 Go de RAM sous Linux.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 19 September 2019 à 21:33
Je pense que oui:

(http://pix.toile-libre.org/upload/img/1568923314.png) (http://pix.toile-libre.org/?img=1568923314.png)

Le mien ne fait que 2.7 Go de RAM utilisable sous linux et a calculé 1 t1 avec succès (3 jours)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 20 September 2019 à 12:24
Et voilà les badges intermédiaires (avec 1 et 2 étoile(s)) !
(1ère partie)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 20 September 2019 à 12:26
Et voilà les badges intermédiaires (avec 1 et 2 étoile(s)) !
(2ème partie)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 20 September 2019 à 18:16
On peut les faire clignoter les étoiles ? :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 20 September 2019 à 19:44
merci pour ces super badges  :love: :smak:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 20 September 2019 à 19:59
On peut les faire clignoter les étoiles ? :siflotte:
On pourrait (GIF animé) mais... non !   :cpopossib:
(trop site amateur des années 2000 :cavapobienmwa: )

merci pour ces super badges  :love: :smak:
:jap:  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 20 September 2019 à 23:02
Sur la VM linux 2 cores : https://quchempedia.univ-angers.fr/athome/results.php?hostid=34

Déjà il continue de m'envoyer des t2, ensuite ils ont l'air de vraiment exploiter le cpu maintenant (temps CPU est le double de la durée), et à l'inverse les t1 ont une temps de fonctionnement double du temps CPU !!!

Y'a comme un soucis.......
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 20 September 2019 à 23:20
Sur la VM linux 2 cores : https://quchempedia.univ-angers.fr/athome/results.php?hostid=34

Déjà il continue de m'envoyer des t2, ensuite ils ont l'air de vraiment exploiter le cpu maintenant (temps CPU est le double de la durée), et à l'inverse les t1 ont une temps de fonctionnement double du temps CPU !!!

Y'a comme un soucis.......

Faut que les caches se vident pour que je fasse le point, mais tes résultats ne me choquent pas (c'est cohérent avec les problèmes des autres linuxiens)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 21 September 2019 à 08:12
On peut les faire clignoter les étoiles ? :siflotte:

Seulement à Noël :o

@damotbe : Tu peux voir avec les gestionnaires de comptes pour faire ajouter le projet dans la liste ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 21 September 2019 à 09:39
Faut que les caches se vident pour que je fasse le point, mais tes résultats ne me choquent pas (c'est cohérent avec les problèmes des autres linuxiens)
Ah je pensais que tu disais que les T1 étaient les seules à bien fonctionner et tirer parti de leur core, je n'avais pas compris que les linuxiens avaient la même chose...


Edith : je confirme que j'ai un core à 100% et le 2ème à 1% avec les deux tâches t1 en parallèle sur la VM nunux, elles occupent chacune 50% d'un core. Le problème est là.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 22 September 2019 à 08:33
Ah je pensais que tu disais que les T1 étaient les seules à bien fonctionner et tirer parti de leur core, je n'avais pas compris que les linuxiens avaient la même chose...


Edith : je confirme que j'ai un core à 100% et le 2ème à 1% avec les deux tâches t1 en parallèle sur la VM nunux, elles occupent chacune 50% d'un core. Le problème est là.

La version VM marchait mieux. J'ai une idée d'où peut venir le problème, mais je n'ai pas de solution  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 26 September 2019 à 07:15
La bêta test intel part en erreur de calcul au bout de quelques secondes.
Citer
0.06 (intel_mt) (beta test)

Citer
26 Sep 2019, 5:09:44 UTC    26 Sep 2019, 5:10:08 UTC    Erreur lors des calculs    2.19    0.00    ---    NWChem v0.06 (intel_mt)
x86_64-pc-linux-gnu
Citer
   26 Sep 2019, 5:09:44 UTC    26 Sep 2019, 5:10:08 UTC    Erreur lors des calculs    2.13    0.00    ---    NWChem v0.06 (intel_mt)
x86_64-pc-linux-gnu
Citer
26 Sep 2019, 5:09:44 UTC    26 Sep 2019, 5:10:08 UTC    Erreur lors des calculs    2.11    0.00    ---    NWChem v0.06 (intel_mt)
x86_64-pc-linux-gnu

Citer
Stderr output

<core_client_version>7.9.3</core_client_version>
<![CDATA[
<message>
process exited with code 195 (0xc3, -61)</message>
<stderr_txt>
07:09:54 (31211): wrapper (7.5.26014): starting
07:09:54 (31211): wrapper: running worker.sh (8)
execv() failed: : Permission denied
07:09:55 (31211): worker.sh exited; CPU time 0.000263
07:09:55 (31211): app exit status: 0x6c00
07:09:55 (31211): called boinc_finish(195)

</stderr_txt>
]]>
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 26 September 2019 à 13:03
Les versions :0.07 (t1) et 0.07 (t2) pour le moment ça a l'air de bien se passer.
Les 8 cœurs sont occupés a 100%.  :love:

Pour la version :0.07 (intel_mt) (beta test) ca part toujours en erreur.
Citer
26 Sep 2019, 10:49:01 UTC    26 Sep 2019, 10:54:12 UTC    Erreur lors des calculs    2.26    0.00    ---    NWChem v0.07 (intel_mt)
x86_64-pc-linux-gnu
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 26 September 2019 à 13:17
Par contre j'ai reçu celui la alors que mon processeur est un AMD.
Citer
26 Sep 2019, 10:54:12 UTC    26 Sep 2019, 10:55:31 UTC    Erreur lors des calculs    3.11    0.00    ---    NWChem v0.07 (intel_mt)
x86_64-pc-linux-gnu
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 28 September 2019 à 16:16
Merci pour ces retours. Avec le raid, c'est la pause pour tout le monde en ce moment, mais après on s'y remet  :hyperbon:
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 01 October 2019 à 10:02
@damotbe : Tu peux voir avec les gestionnaires de comptes pour faire ajouter le projet dans la liste ?

J'ai mis un message sur le forum de BoincStats. Qui d'autre ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 01 October 2019 à 11:10
SAM !!
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 01 October 2019 à 21:44
Statseb et SetiBZH ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 01 October 2019 à 21:54
Ben si on considère que c'est une béta "stable" il faudrait qu'il soit partout le projet non ? (BoincStats...) ou alors tu veux pas encore en faire "la pub" pour pas être submergé sur un infra pas encore taillée pour ça ? (et d'avoir un nouveau stagiaire !)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 October 2019 à 11:53
Mettons ça sur tous les outils de l'AF. Ça c'est pas un problème.

Pour le reste... L'infra est taillée pour c'est le projet lui-même qui est pas fonctionnel sur certains aspects (forums/modo/profils/système de points).
Par contre, on est très content des résultats.

Cette phase n'est pas simple à gérer et les décisions peuvent avoir de lourdes conséquences.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 02 October 2019 à 14:15
Coucou, je veux bien un code d'invitation ^^
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 02 October 2019 à 15:05
Ahhhh oui j'oubliais niaisement qu'il faut encore un code invitation !!

Donc exit les sites de stats officiels pour le moment ! J'ai envie de dire : et même de l'AF, ce n'est pas un projet public pour le moment !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 02 October 2019 à 15:09
J'ai loupé un épisode? Il me semblait qu'au départ il était juste question d'intégrer QuChemPedIA dans les gestionnaires de compte - et là, je n'en vois que 2: BAM et SAM :spamafote:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 02 October 2019 à 15:12
Pas faux ! :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Sébastien le 02 October 2019 à 17:46
J'ai loupé un épisode? Il me semblait qu'au départ il était juste question d'intégrer QuChemPedIA dans les gestionnaires de compte - et là, je n'en vois que 2: BAM et SAM :spamafote:
Pour SAM, ce ne sera pas possible tant que le projet n'exporte pas ses stats.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 October 2019 à 19:47
J'ai loupé un épisode? Il me semblait qu'au départ il était juste question d'intégrer QuChemPedIA dans les gestionnaires de compte - et là, je n'en vois que 2: BAM et SAM :spamafote:
Pour SAM, ce ne sera pas possible tant que le projet n'exporte pas ses stats.

Il ne me semble pas lui avoir demandé de garder ça pour lui  :lol:
J'imagine que c'est encore un truc à trouver dans la configuration ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Sébastien le 02 October 2019 à 19:57
L'export se configure dans le fichier config.xml
<task>
      <cmd>db_dump -d 4 -dump_spec ../db_dump_spec.xml</cmd>
      <period>6 hours</period>
      <disabled>0</disabled>
      <output>db_dump.out</output>
</task>
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 October 2019 à 20:26
L'export se configure dans le fichier config.xml
<task>
      <cmd>db_dump -d 4 -dump_spec ../db_dump_spec.xml</cmd>
      <period>6 hours</period>
      <disabled>0</disabled>
      <output>db_dump.out</output>
</task>

Merci pour l'aide. Dans ma config, j'ai activé le bloc correspondant qui ressemble à ça :
<task>
      <cmd>db_dump -d 2 -dump_spec ../db_dump_spec.xml</cmd>
      <period>24 hours</period>
      <disabled>0</disabled>
      <output>db_dump.out</output>
</task>

Est-ce que c'est grave si je laisse 24h ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Sébastien le 02 October 2019 à 20:41
Non, ce n'est pas grave. Cela correspond à la fréquence de MAJ des exports.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 October 2019 à 20:43
Normalement, c'est en place ! Si je comprends bien, la suite c'est d'enlever le code d'invitation ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 02 October 2019 à 21:08
Normalement, c'est en place ! Si je comprends bien, la suite c'est d'enlever le code d'invitation ?
ça fonctionne chez moi  :hyperbon:
si tu pouvais mettre l'URL dans le 1er post ça serait top, j'ai dû lire des tas de pages avant de trouver  :ange:
https://quchempedia.univ-angers.fr/athome/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Sébastien le 02 October 2019 à 21:12
Normalement, c'est en place ! Si je comprends bien, la suite c'est d'enlever le code d'invitation ?
Le code d'invitation n'empêche pas l'intégration au gestionnaire de compte SAM. Dans la mesure où vous fournissez le code d'invitation sur demande, je vais aussi intégrer le projet à Statseb.

De plus, afin d'éviter d'être submergé par des spam-bots, je te suggère de mettre en place une solution anti-bot avant d'enlever le code d'invitation. Ou, plus simplement, laisser le code d'invitation mais l'afficher sur la page d'accueil du projet.
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 October 2019 à 21:37
Normalement, c'est en place ! Si je comprends bien, la suite c'est d'enlever le code d'invitation ?
ça fonctionne chez moi  :hyperbon:
si tu pouvais mettre l'URL dans le 1er post ça serait top, j'ai dû lire des tas de pages avant de trouver  :ange:
https://quchempedia.univ-angers.fr/athome/

Bonne idée, C'est fait !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 October 2019 à 21:38
Le code d'invitation n'empêche pas l'intégration au gestionnaire de compte SAM. Dans la mesure où vous fournissez le code d'invitation sur demande, je vais aussi intégrer le projet à Statseb.

De plus, afin d'éviter d'être submergé par des spam-bots, je te suggère de mettre en place une solution anti-bot avant d'enlever le code d'invitation. Ou, plus simplement, laisser le code d'invitation mais l'afficher sur la page d'accueil du projet.

Ok, je regarde ça demain. Il faudrait que j'ajoute la description de ce qu'on fait aussi au passage.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 03 October 2019 à 11:38
Le forum est créé , le code d'invitation est affiché !

Le projet quitte officiellement sa phase "bêta" !  :clafete:

Si vous voulez m'aider à modérer le forum, j'en serais ravi  :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 October 2019 à 13:38
Et en plus : il fonctionne :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: nabz le 03 October 2019 à 13:57
Création de compte impossible : les espaces dans les pseudos ne sont pas autorisés. :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 03 October 2019 à 14:31
Création de compte impossible : les espaces dans les pseudos ne sont pas autorisés. :/

Pas que je sache ! De nombreux utilisateurs ont des espaces. Pas d'autre piste ? Un message d'erreur particulier ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: nabz le 03 October 2019 à 15:25
Nouvel essai et création réussie. Le problème devait se situer entre la chaise et le clavier. :spamafote:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 03 October 2019 à 15:53
me voilà rassuré !  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 October 2019 à 15:59
(http://www.journaldugeek.com/files/2012/05/PEBKAC.jpg)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: nabz le 04 October 2019 à 12:38
Voici l'état de mes premiers résultats : pas mal pour un début.

Citer
État: Tous (200) · En cours (184) · Validation en attente (0) · Validation non concluante (0) · Valide (14) · Invalide (2) · Erreur (0)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 04 October 2019 à 13:51
Voici l'état de mes premiers résultats : pas mal pour un début.

Citer
État: Tous (200) · En cours (184) · Validation en attente (0) · Validation non concluante (0) · Valide (14) · Invalide (2) · Erreur (0)

C'est un sans faute même ! (invalide = problème insoluble en chimie, échec immédiat normalement)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 04 October 2019 à 17:55
Moi avec mes modestes tests sur le Mac ce fut beaucoup moins bien !! (je retenterai après le RAID)

État: Valide (3) · Invalide (1) · Erreur (12)

(non en fait je les ai presque tous annulé au début du RAID, y'en a eu 1 en erreur je crois :p)


Sur la VM mimix (nunux) de chez OVH ça tourna assez bien :

État: Valide (21) · Invalide (0) · Erreur (3)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 04 October 2019 à 21:27
J'essayerai avec VirtualBox ce WE si j'ai pas la flemme de l'installer ...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 04 October 2019 à 23:34
"Les digues du barrage anti-VM cèdent peut à peu face au courant des bits crunchés"

(proverbe des moines crunchers de la grande Abbaye de Maître Pen'd Hing :jap:)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 05 October 2019 à 10:54
T'inquiète pas, c'est juste parce que c'est un projet de quelqu'un d'ici que je veux faire l'effort :D ... et au final j'ai qu'une machine qui pourra participer. :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 05 October 2019 à 15:14
Je m'inquiète pas et merci pour l'effort !! :jap:

Te connaissant (un peu) je sais qu'il est très grand  :calin:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 05 October 2019 à 15:30
... ça commence à fumer sur le forum QCPIA, bon courage !! :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: nabz le 05 October 2019 à 16:08
Il doit falloir des nerfs d'acier et une patience de moine tibétain pour gérer un forum. Bah, comme pour être prof en fait !

Pas mon truc quoi.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 05 October 2019 à 16:10
Moine *cruncher* tibétain, je précise.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 06 October 2019 à 10:08
Il doit falloir des nerfs d'acier et une patience de moine tibétain pour gérer un forum. Bah, comme pour être prof en fait !

Pas mon truc quoi.

Oui, c'est pénible... D'ailleurs je cherche toujours un ou des modérateurs  :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 06 October 2019 à 13:29
On peut certainement pas t'y remplacer : y'a que toi qui sait vraiment répondre aux questions, surtout qu'ils trouvent de nouveaux problèmes - et c'est bien le but de l'avoir ouvert en béta publique !!

Avoir besoin de "modérateurs" c'est pour le jour où y'aura vraiment des 10aines de posts tous les jours sur le forum, avec des mecs qui s'engueulent, qui t'insultent, etc :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 07 October 2019 à 22:18
Je viens de reprendre 2x8Go de RAM pour mon Ryzen 1700 en prévision de ce projet et du projet climatique sur WCG qui devrait être également gourmand en RAM.

Avec 32Go, les 16 threads devraient être à l'aise !  :D

Reprise des calculs après le RAID.

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 07 October 2019 à 22:51
A l'aise à l'aise ça dépend ce que tu mets dedans, il m'est arrivé moulte fois de saturer mes 16 Go avec les 8 coeurs (HT) à cause de "plusieurs projets VB/VM tournant en même temps" :D

Mais j'aime bien vivre dangereusement...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 11 October 2019 à 08:04
Le projet est sur BOINCstats !  :lestat:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: nafrayou le 11 October 2019 à 10:36
Le projet est sur BOINCstats !  :lestat:

Super ..

heu oui mais impossible de crée un compte "" project down "
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 11 October 2019 à 11:01
Le projet est sur BOINCstats !  :lestat:

Super ..

heu oui mais impossible de crée un compte "" project down "
idem pour moi, peut-être un problème d'accès pour BAM :
Last update user XML    2019-10-10 08:35:01 UTC (20:28:23 old)
https://www.boincstats.com/stats/185/project/detail/ (https://www.boincstats.com/stats/185/project/detail/)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 12 October 2019 à 20:47
Le projet est sur BOINCstats !  :lestat:
L'affluence sur le forum va augmenter :D
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 12 October 2019 à 21:02
Le projet est sur BOINCstats !  :lestat:
L'affluence sur le forum va augmenter :D
Et les récriminations en tout genre aussi.  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 13 October 2019 à 17:45
Plop

Le projet ne veut pas m'envoyer de tâches.

Le PC :

Linux (basé sur Debian Buster), CPU : Q6600
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 14 October 2019 à 20:39
sur mon PC @home, j'ai :
- une tâche qui a mis 1d:17h pour passer de 0 à 100% et elle n'est pas terminée, toujours à 100% avec 3d:03h et restant --- , c'est grave docteur ?
- une tache à 36% au bout de 4d:16h, restant estimé : 8d:3h
- une tache à 24% au bout de 2d:20h, restant estimé : 8d:22h
les 4 autres tâches sont en attente de mémoire (je n'ai que 8go de ram pour un 8 cores et une vbox prend 2go).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 14 October 2019 à 23:21
Sur la VM munix du coup j'ai remis QCPIA et donc 2 tâches pour rien puisqu'elles ne tournent que sur un coeur...

Donc je fais un app_config pour n'avoir qu'une tâche à la fois, ça marche mais maintenant j'arrive rien à faire tourner en parallèle comme 2ème projet...... finalement je mets LHC native... et là ça me prend 2 coeurs et ça stoppe QCPIA  :rhaa:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 15 October 2019 à 07:51
Sur la VM munix du coup j'ai remis QCPIA et donc 2 tâches pour rien puisqu'elles ne tournent que sur un coeur...

Donc je fais un app_config pour n'avoir qu'une tâche à la fois, ça marche mais maintenant j'arrive rien à faire tourner en parallèle comme 2ème projet...... finalement je mets LHC native... et là ça me prend 2 coeurs et ça stoppe QCPIA  :rhaa:
Oui, il faut éviter les projets multi-cores  :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 15 October 2019 à 08:06
Je ne sais pas trop pourquoi la création de compte depuis BAM! ne fonctionne pas (project down)

Pour les temps d'exécution, c'est long, très long... et le temps n'est pas prévisible à l'avance (en gros le code fait : tant que tu n'as pas convergé, continue...)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 15 October 2019 à 08:08
J'ai pris quelques tâches sur mon Ryzen 7 / W10 et sur Ryzen 5 / Ubuntu 16.04.

J'attends de voir comment ça se passe, les tâches natives sous Linux semblent mieux fonctionner. Dans tous les cas, je n'en fait qu'une à la fois pour le moment via un app_config.

@damotbe : tu préfères qu'on teste tranquillement une par une pour éviter les inter-actions ou tu ne vois pas de problèmes à en lancer plusieurs en // si les ressources le permettent ?

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 15 October 2019 à 09:09
Bonjour,

Bam est réparé, l'admin a débloqué la situation.
Pour mes UT en cours de calcul, je vais attendre jusqu'à la dead-line, pas de souci.

Nouveau problème :
PC nouvellement rattaché à QuChemPedIA, toutes les UT partent en erreur :

2019-10-15 09:03:51 (6084): Hardware acceleration failed with previous execution. Disabling VirtualBox hardware acceleration support.
2019-10-15 09:03:51 (6084): ERROR: Invalid configuration.  VM type requires acceleration but the current configuration cannot support it.
2019-10-15 09:03:51 (6084): Could not create VM
2019-10-15 09:03:52 (6084):
   NOTE: VirtualBox has reported an improperly configured virtual machine. It was configured to require
    hardware acceleration for virtual machines, but your processor does not support the required feature.
    Please report this issue to the project so that it can be addresssed.
    Error Code: ERR_CPU_VM_EXTENSIONS_DISABLED

09:03:52 (6084): called boinc_finish(-148)

j'ai mis le projet en "pas de travail"
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 15 October 2019 à 12:35
Je suis toujours en "Got 0 new tasks" (https://forum-images.hardware.fr/images/perso/1/kyjja.gif)

J'ai racheté ce PC pour ce projet alors file moi des tâches (https://forum-images.hardware.fr/images/perso/4/lourspd.gif)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 15 October 2019 à 17:41
Hier j'ai chargé des t2 qui fonctionnent sur un seul thread (linux native sur ubuntu 18.04) et en plus cette nuit je me suis pris un orage et elles sont reparties à zéro au redémarrage de l'ordi  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 16 October 2019 à 00:10
Boinc eet pas très étanche :/
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 16 October 2019 à 23:07
Bonjour,

Bam est réparé, l'admin a débloqué la situation.
Pour mes UT en cours de calcul, je vais attendre jusqu'à la dead-line, pas de souci.

Nouveau problème :
PC nouvellement rattaché à QuChemPedIA, toutes les UT partent en erreur :

2019-10-15 09:03:51 (6084): Hardware acceleration failed with previous execution. Disabling VirtualBox hardware acceleration support.
2019-10-15 09:03:51 (6084): ERROR: Invalid configuration.  VM type requires acceleration but the current configuration cannot support it.
2019-10-15 09:03:51 (6084): Could not create VM
2019-10-15 09:03:52 (6084):
   NOTE: VirtualBox has reported an improperly configured virtual machine. It was configured to require
    hardware acceleration for virtual machines, but your processor does not support the required feature.
    Please report this issue to the project so that it can be addresssed.
    Error Code: ERR_CPU_VM_EXTENSIONS_DISABLED

09:03:52 (6084): called boinc_finish(-148)

j'ai mis le projet en "pas de travail"
Tu as bien activé toutes les accélérations matérielles de virtualisation dans le BIOS (Intel VT-x ou AMD-V) ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 17 October 2019 à 17:55
Hier j'ai chargé des t2 qui fonctionnent sur un seul thread (linux native sur ubuntu 18.04) et en plus cette nuit je me suis pris un orage et elles sont reparties à zéro au redémarrage de l'ordi  :/

Sous Linux c'est natif sans VM et aussi sans checkpoint.


Il reste de vieilles WU, il faut le temps de vider...  :D
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 17 October 2019 à 17:57
Je suis toujours en "Got 0 new tasks" (https://forum-images.hardware.fr/images/perso/1/kyjja.gif)

J'ai racheté ce PC pour ce projet alors file moi des tâches (https://forum-images.hardware.fr/images/perso/4/lourspd.gif)

Pourtant, il y a des tâches  :??:

Si c'est pas un Linux, il faut bien avoir les instructions de virtualisation activées dans le BIOS (et un proc qui supporte). Peut-être l'installation de Virtualbox est pas reconnue ou trop ancienne...
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 17 October 2019 à 18:10
Je suis toujours en "Got 0 new tasks" (https://forum-images.hardware.fr/images/perso/1/kyjja.gif)

J'ai racheté ce PC pour ce projet alors file moi des tâches (https://forum-images.hardware.fr/images/perso/4/lourspd.gif)

Pourtant, il y a des tâches  :??:

Si c'est pas un Linux, il faut bien avoir les instructions de virtualisation activées dans le BIOS (et un proc qui supporte). Peut-être l'installation de Virtualbox est pas reconnue ou trop ancienne...
Combien de Mémoire ?
Et combien Espace disque disponible ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 17 October 2019 à 21:15
Il y a des tâches : mon ordi sous Windows m'en a chargé +90 aujourd'hui !  :eek:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 17 October 2019 à 21:19
2 Go :o (oui, je sais, c'est souvent bloquant, j'attends une 'rette de 4 à ajouter).

Espace disque : plus de 100 Go.


Pour Virtualbox, c'est pas sensé être installé avec le paquet BOINC ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 18 October 2019 à 11:05
J'ai une machine Ryzen sur Linux que je vais consacrer à ton projet damotbe : 6C/12T et 16Go de RAM sous Ubuntu 18.04 détails (https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=35)

Je suis en train de monter progressivement le nombre d'UT en // pour vérifier que tout ce passe bien. Les UT 2T semblent en tout cas mieux fonctionner que les 1T : meilleur estimatif du temps, etc...

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 18 October 2019 à 18:02
Heu oui mais non, sous linux y'a toujours le problème qu'il sait pas utiliser un core entier par tâche quand il y en a plusieurs, non ?

Moi sur ma VM nonox mes deux tâches se partageaient un des deux core et l'autre se tournait les pouces, j'ai limité à une tâche à la fois.

Ce sujet est largement débattu sur le forum du projet.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 20 October 2019 à 08:36
Heu oui mais non, sous linux y'a toujours le problème qu'il sait pas utiliser un core entier par tâche quand il y en a plusieurs, non ?

Moi sur ma VM nonox mes deux tâches se partageaient un des deux core et l'autre se tournait les pouces, j'ai limité à une tâche à la fois.

Ce sujet est largement débattu sur le forum du projet.

Normalement, c'est réglé.

J'ai une machine Ryzen sur Linux que je vais consacrer à ton projet damotbe : 6C/12T et 16Go de RAM sous Ubuntu 18.04 détails (https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=35)

Je suis en train de monter progressivement le nombre d'UT en // pour vérifier que tout ce passe bien. Les UT 2T semblent en tout cas mieux fonctionner que les 1T : meilleur estimatif du temps, etc...

 :hello:

merci  :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 20 October 2019 à 15:26
Bonjour,

je me pose des questions sur le fonctionnement des UT Windows
généralement, quand un projet avec une virtualbox calcule, il me prend 100/nombre de cores en pourcentage CPU dans le gestionnaire de tâches soit 25% pour un quad-core.
ici, ça me prend entre 0 et 2% grand max par UT pour 2-3 UT en cours de calcul.
J'ai l'impression que les UT n'exploitent pas la puissance de calcul des CPU et donc qu'elles sont beaucoup plus lentes que prévu.
Vous constatez la même chose ?
Autre truc, si mon PC redémarre pour une raison X ou Y, les UT (version 0.08) repartent à zéro. C'est déprimant quand elles étaient à 100% depuis plusieurs jours et que la deadline est dans 1-2 jours  :cry:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: PhilTheNet le 21 October 2019 à 06:39
Yop,

C'est quoi le "Code d'invitation" ?

Thks
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 21 October 2019 à 07:03
Sur la page d'accueil du projet (comme PRIMABOINCA). Il faut créer un compte avant de rattacher ses hotes.  :kookoo:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 21 October 2019 à 12:36
Bonjour,

je me pose des questions sur le fonctionnement des UT Windows
généralement, quand un projet avec une virtualbox calcule, il me prend 100/nombre de cores en pourcentage CPU dans le gestionnaire de tâches soit 25% pour un quad-core.
ici, ça me prend entre 0 et 2% grand max par UT pour 2-3 UT en cours de calcul.
J'ai l'impression que les UT n'exploitent pas la puissance de calcul des CPU et donc qu'elles sont beaucoup plus lentes que prévu.
Vous constatez la même chose ?
Autre truc, si mon PC redémarre pour une raison X ou Y, les UT (version 0.08) repartent à zéro. C'est déprimant quand elles étaient à 100% depuis plusieurs jours et que la deadline est dans 1-2 jours  :cry:

Ce n'est pas normal. Il semblerait que le code de calcul plante mais que la VM continue. dans unc as comme ça, il vaut mieux abandonner l'UT. Aucune idée de comment palier à ce problème  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 21 October 2019 à 13:56
Vivement le nouveau stagiaire :siflotte: :smak:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 21 October 2019 à 20:18
Je viens de lancer 4 unités 2T et 2 unités 1T en même temps, on va voir comment se comporte la machine cette nuit.

 :hello:
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 21 October 2019 à 23:57
Bonjour,

je me pose des questions sur le fonctionnement des UT Windows
généralement, quand un projet avec une virtualbox calcule, il me prend 100/nombre de cores en pourcentage CPU dans le gestionnaire de tâches soit 25% pour un quad-core.
ici, ça me prend entre 0 et 2% grand max par UT pour 2-3 UT en cours de calcul.
J'ai l'impression que les UT n'exploitent pas la puissance de calcul des CPU et donc qu'elles sont beaucoup plus lentes que prévu.
Vous constatez la même chose ?
Autre truc, si mon PC redémarre pour une raison X ou Y, les UT (version 0.08) repartent à zéro. C'est déprimant quand elles étaient à 100% depuis plusieurs jours et que la deadline est dans 1-2 jours  :cry:

Ce n'est pas normal. Il semblerait que le code de calcul plante mais que la VM continue. dans unc as comme ça, il vaut mieux abandonner l'UT. Aucune idée de comment palier à ce problème  :/
j'ai annulé les 0.08, les 0.11 se terminent correctement mais la charge CPU reste basse
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: PhilTheNet le 22 October 2019 à 06:12
Sur la page d'accueil du projet (comme PRIMABOINCA). Il faut créer un compte avant de rattacher ses hotes.  :kookoo:


Rejoindre QuChemPedIA@home
Code d'invitation :
Choisissez un pseudonyme :
Votre adresse email :
Choisissez un mot de passe :
 :gno:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 22 October 2019 à 08:34
Je laisse les vannes ouvertes car cela semble bien se passer. En revanche, j'ai du mal à n'avoir que des UTs 2T, il est possible de faire qqch pour ne recevoir que des 2T ?

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 22 October 2019 à 10:01
Sur la page d'accueil du projet (comme PRIMABOINCA). Il faut créer un compte avant de rattacher ses hotes.  :kookoo:


Rejoindre QuChemPedIA@home
Code d'invitation :
Choisissez un pseudonyme :
Votre adresse email :
Choisissez un mot de passe :
 :gno:

Phil ouvre bien tes mirettes il est vraiment en gras et en haut de la page d’accueil le code.

https://quchempedia.univ-angers.fr/athome/

:)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 22 October 2019 à 10:17
A part moi ça plante de partout :

Mac:
https://quchempedia.univ-angers.fr/athome/results.php?hostid=42&offset=0&show_names=0&state=6&appid=

https://quchempedia.univ-angers.fr/athome/results.php?hostid=42&offset=0&show_names=0&state=5&appid=

Ninix:
https://quchempedia.univ-angers.fr/athome/results.php?hostid=34&offset=0&show_names=0&state=5&appid=


Mais bon sur ninix j'en ai eu pas mal qui ont tourné
https://quchempedia.univ-angers.fr/athome/results.php?hostid=34&offset=0&show_names=0&state=4&appid=

Mais sur Mac bcp moins
https://quchempedia.univ-angers.fr/athome/results.php?hostid=42&offset=0&show_names=0&state=4&appid=
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 24 October 2019 à 19:37
Je viens d'annuler 2 tâches 1T qui tournaient depuis + de 24h, j'ai laissé les autres tourner.

https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=21044
https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=25935

 :hello:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 24 October 2019 à 21:17
Je viens d'annuler 2 tâches 1T qui tournaient depuis + de 24h, j'ai laissé les autres tourner.

https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=21044
https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=25935

 :hello:

chez moi, elles mettent 5 jours pour terminer (Xeon E5-1620 V3 @3.5GHz)
4 taches, dont 3 en calcul pour 8 threads, Charge globale à 5%, bref, le pc se tourne les pouces.
(http://pix.toile-libre.org/upload/img/1571947388.png)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 24 October 2019 à 22:06
J'ai chargé des tâches sur mon vieux portable Dell (Duron bi-core) :
il a crunché une UT assez rapidement puis 1 UT t2 qui a mis longtemps (plus de 2 jours)
et, avec la perte régulière du Wifi, quand je redémarre la dernière UT t1, la tâche redémarre à 0 %
(il ne me semble pas que cela revienne à 0 % sur mes ordis Windows lors d'un redémarrage)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 25 October 2019 à 18:01
Bon je confirme que c'est absolument impossible de faire tourner QCPIA sur mon Mac en même temps qu'un autre projet à VM : comme j'avais limité à 2 tâches parallèles (à cause des prérequis en RAM) je voulais le faire cohabiter, j'ai tenté avec NanoHUB (2 max aussi) et mon boinc devenait incontrôlable : impossible malgré toutes sortes de tentatives de connecter le boinc manager ou BoincTasks à boinc, je voyais les tâches tourner en mémoire mais impossible de faire quoi que ce soit, et des fois je voyais des comportements bizarres en mémoire...

Paradoxalement mon Mac restait tout à faire fonctionnel, c'est boinc lui même qui en prenait un (gros) coup.

Du coup j'ai arrêté QCPIA (je veux monter un peu mes crédits sur NanoHub) via SAM et le lendemain j'ai repris la main sur boinc...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 28 October 2019 à 15:02
J'ai l'impression que le temps imparti pour calculer les unités n'est pas suffisant.
Je me laisse jusqu'au 3 novembre pour qu'une unité se termine.
Ce qui est sûr, c'est que sur un intel E7500 @ 3GHz, j’atteins la date limite avec un avancement à 53% seulement !
il faut bien choisir ses CPUs pour ce projet.
Peut-être penser à doubler le temps limite d'une unité ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: nafrayou le 28 October 2019 à 21:50
J en ai fini une bonne vingtaine sans problème  , mais la il m en reste une qui est déjà a  9j 13h pour 70% , le problème c est qu il faudrait la finir pour le 30/10  alors que l estimation donne encore 4j 5H  !!!


que faire ? .....
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: nabz le 28 October 2019 à 22:08
J'ai l'impression que le temps imparti pour calculer les unités n'est pas suffisant.

État: Tous (2993) · En cours (1333) · Validation en attente (0) · Validation non concluante (0) · Valide (1113) · Invalide (298) · Erreur (249)

J'ai la même impression, j'ai moins d'une dizaine d'erreurs de calculs, toutes les autres sont des tâches annulées par le serveur.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 29 October 2019 à 09:33
Essayez de suspendre un temps vos tâches.
Pendant le sprint FB sur yoyo j'en avais suspendu 3. Quand je les ai reprises le lendemain du sprint, elles sont parties toutes les trois en "envoi en cours" puis en "prêt à valider". Elles ont été validées sans problème alors que les temps de calcul étaient "ridicules": 5h10, 0h48 et 0h18.
Pas sûre pour autant que les résultats des calculs aient beaucoup fait avancer la recherche :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 30 October 2019 à 13:42
Tu as eu de la chance modesti, mais j'ai beau les suspendre 1, 2, 3h, ça ne change rien  :cry:
Elles sont à 100% depuis plusieurs jours, elles tournent depuis 8-9j et la deadline est dans 4j :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 30 October 2019 à 14:43
Coucou  :hello:

En ce moment c'est tendu...  :pt1cable:
Les résultats sont satisfaisants scientifiquement parlant. Techniquement, je suis bien conscient que ce n'est pas idéal...

chez moi, elles mettent 5 jours pour terminer (Xeon E5-1620 V3 @3.5GHz)
4 taches, dont 3 en calcul pour 8 threads, Charge globale à 5%, bref, le pc se tourne les pouces.

la deadline est bien calibrée quand la machine calcule à 100%. Il faudrait trouver une solution  à l'occupation CPU. Pourrais-tu essayer d'installer une VM Ubuntu et attacher le projet à l'intérieur pour comparer ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 30 October 2019 à 15:46
J'ai des tâches linux qui se sont rechargées, visiblement j'avais enlevé mon app_config pour ne faire qu'une tâche à la fois, je ne sais pas pourquoi car là je constate que les deux restent de nouveau sur un seul core et l'autre ne fait rien... ou alors ça avait été résolu, et ça régresse ?

Si je comprends bien en l'absence d'un nouveau stagiaire il n'y aura pas de nouveau développement dans le dur / la hard technique, c'est ça ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 30 October 2019 à 21:16
la deadline est bien calibrée quand la machine calcule à 100%. Il faudrait trouver une solution  à l'occupation CPU. Pourrais-tu essayer d'installer une VM Ubuntu et attacher le projet à l'intérieur pour comparer ?
Ouais, je peux faire ça, je te tiens au courant  :coffeetime:

EDIT : VM installée (ubuntu server 18.04 LTS) 1 thread, 3G ram, une unité en cours de calcul, estimé au départ : 86 jours
CPU à 100% dans la VM et sur l'hôte. Mémoire virtuelle utilisée à 0% : 1,21Go.
Au bout de 2h, j'ai fais 0,106% donc en théorie 100% en 2000h soit environ 83 jours. J'aurais dépassé la date limite depuis un moment.
La mémoire utilisée est passée à 1,83Go.

EDIT2 : Je suis étonné, d'après les logs, l'unité s'est terminée correctement à 2h22 ce matin, la 2ième s'est terminée à 9h18.
La 3ième tourne depuis 50min et indique 14h restantes. ça fonctionne nettement mieux qu'en windows :hyperbon:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 01 November 2019 à 15:25
@RLDF : l’estimation du temps de calcul est foireuse... Le code a un comportement non prédictible selon les entrées. Le serveur rapporte une moyenne en heure à 14.81 avec une forte variabilité 0.65 - 86.15.
Est-ce qu'avec une VM Linux ton occupation CPU est bonne ?

J'ai des tâches linux qui se sont rechargées, visiblement j'avais enlevé mon app_config pour ne faire qu'une tâche à la fois, je ne sais pas pourquoi car là je constate que les deux restent de nouveau sur un seul core et l'autre ne fait rien... ou alors ça avait été résolu, et ça régresse ?

Si je comprends bien en l'absence d'un nouveau stagiaire il n'y aura pas de nouveau développement dans le dur / la hard technique, c'est ça ?

Je ne pense pas que ça régresse, en tout cas Théo l'ancien stagiaire nous dépanne encore  bénévolement. C'est vraiment sympa ! Par contre, effectivement il n'y aura pas de gros développements avant le nouveau stagiaire. Mais de notre côté, on trouve que ça fonctionne vraiment bien ! Mais c'est chiant pour ceux pour lesquels ce n'est pas le cas et on essaye de faire au mieux pour dépanner.

sur le forum du projet, il y a des cas comme ça qui ne veulent pas ou plus évoluer... Même en détachant et rattachant ! Sur mes machines j'ai un script qui tourne :
while [[ 1 -eq 1 ]]; do for pid in $(pgrep nwchem); do taskset -p 0xffffffff $pid; done; sleep 60; done
Toutes les minutes il force l'affinité de nwChem. Selon ta configuration il faut lancer la commande en root (ou sudo) pour que ça fonctionne et idéalement dans un screen.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 01 November 2019 à 17:34
Bon j'ai vérifié j'avais toujours un seul core occupé. J'ai lancé ta commande... mais du coup c'est une commande qui boucle et ne rend pas la main, je ne peux plus rien faire en parallèle, et donc pas vérifier son effet... ??
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 01 November 2019 à 17:53
Bon j'ai vérifié j'avais toujours un seul core occupé. J'ai lancé ta commande... mais du coup c'est une commande qui boucle et ne rend pas la main, je ne peux plus rien faire en parallèle, et donc pas vérifier son effet... ??
Oui, c'est pour cela qu'il faut la mettre dans un screen (man screen)
tu peux te détacher de la fenetre et elle tourne en tâche de fond, tu rattacher de temps en temps pour voir si tout va bien  :coffeetime:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 01 November 2019 à 17:57
@RLDF : l’estimation du temps de calcul est foireuse... Le code a un comportement non prédictible selon les entrées. Le serveur rapporte une moyenne en heure à 14.81 avec une forte variabilité 0.65 - 86.15.
Est-ce qu'avec une VM Linux ton occupation CPU est bonne ?
Oui, l'occupation CPU est bien à 100% pour le thread concerné, c'est nickel  :hyperbon:
Restera à optimiser le code pour la virtualbox windows afin d'utiliser 100% du processus, ça devrait diviser par 50 le temps de calcul et ravir les crunchers  :miam:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 02 November 2019 à 00:17
Bon ben debian il connait pas "screen" mais c'est pas grave : j'ai stoppé ta commande et j'ai deux tâches qui continuent de tourner à un core chacun, youpi !!!

Donc je suppose que ça agit sur les tâches en cours jusqu'à leur fin, et après quand de nouvelles se lancent il doit refaire son office, donc je l'ai relancé dans ma session de shell.

:jap:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 02 November 2019 à 06:39
Bon ben debian il connait pas "screen" 
Il me semble que si : https://wiki.debian.org/fr/Screen (https://wiki.debian.org/fr/Screen)
https://formation-debian.viarezo.fr/screen.html (https://formation-debian.viarezo.fr/screen.html)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 02 November 2019 à 08:36
 :hello:

Hello ! Je ne comprends pas tout, mais j'essaye de faire tourner le projet sous W7 et W10.

Parfois toutes les tâches sont à l'arrêt : "Reporté : VM job unmanageable, restarting later" ou "en attente de mémoire" alors que rien d'autre ne tourne.

La fonction permettant de limiter le nombre de tâches / machine ne semblant pas fonctionner, petit app_config.

J'utilise VBox 6.0.14

Pour le reste, quand une UT semble vouloir tourner 35 jours, je l'abandonne.

Désolé pas pouvoir aider plus, je n'y comprends rien  :jap:

Merci beaucoup pour ce nouveau projet  :hello: :kookoo:

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 November 2019 à 10:10
:hello:

Hello ! Je ne comprends pas tout, mais j'essaye de faire tourner le projet sous W7 et W10.

Parfois toutes les tâches sont à l'arrêt : "Reporté : VM job unmanageable, restarting later" ou "en attente de mémoire" alors que rien d'autre ne tourne.

La fonction permettant de limiter le nombre de tâches / machine ne semblant pas fonctionner, petit app_config.

J'utilise VBox 6.0.14

Pour le reste, quand une UT semble vouloir tourner 35 jours, je l'abandonne.

Désolé pas pouvoir aider plus, je n'y comprends rien  :jap:

Merci beaucoup pour ce nouveau projet  :hello: :kookoo:


Vbox pose vraiment des problèmes chez certains utilisateurs... C'est pas idéal comme solution.

Pour les tâches longues, l'estimation est fausse. En moyenne, c'est 17h.

Bon ben debian il connait pas "screen" mais c'est pas grave : j'ai stoppé ta commande et j'ai deux tâches qui continuent de tourner à un core chacun, youpi !!!

Donc je suppose que ça agit sur les tâches en cours jusqu'à leur fin, et après quand de nouvelles se lancent il doit refaire son office, donc je l'ai relancé dans ma session de shell.

:jap:

L'effet perdure jusqu'à la fin de l'exécution, l'idée de la boucle c'est de forcer l'effet toutes les minutes.
Si tu ne veux pas utiliser screen, crée un fichier affinity.sh et donne lui les droits d'exécution :
touch affinity.sh
chmod +x affinity.sh

puis il faut mettre dedans :

#!/bin/bash

while [[ 1 -eq 1 ]]; do
    for pid in $(pgrep nwchem); do
        taskset -p 0xffffffff $pid
    done
    sleep 60
done

ensuite exécute le en tâche de fond avec nohup (à relancer quand tu redémarres ta machine).
nohup sudo ./affinity.sh 2>/dev/null >/dev/null &


Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 02 November 2019 à 11:34
 :hello: :jap: :kookoo:
Rien de grave ;)
J'ai stoppé le projet sur pc où ça plante "grave" (ID: 31) et laissé sur le petit XEON (ID: 559) qui a l'air de bien aimer ce projet  :hyperbon:
Juste réduit à 4 UT en //
 :hello: :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 02 November 2019 à 13:24
Bon screen il fallait l'installer, done, j'ai essayé de lire de la doc et j'ai bataillé un moment, mais j'ai jeté l'éponge... je peux pas faire du "multi écran" dans ma session... les "Ctrl-a" avec des commandes derrières ne font absolument rien.

En revanche j'ai maintenant deux "sessions screen" en mémoire qui bouffent plein de CPU (je vois bien des processus screen) et mettent boinc à genoux et que je n'arrive plus à "killer" et je trouve aucune commande pour les fermer !!! Quelle merde ce truc !! J'ai été obligé de rebooter ma VM, formidable.

Bon là il est repassé sous LHC Atlas donc j'ai lâché l'affaire pour le moment, je verrai ton autre proposition avec "affinity"... quand j'aurai le courage :) (en tous cas merci pour les conseils)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 02 November 2019 à 14:11
Bon screen il fallait l'installer, done, j'ai essayé de lire de la doc et j'ai bataillé un moment, mais j'ai jeté l'éponge... je peux pas faire du "multi écran" dans ma session... les "Ctrl-a" avec des commandes derrières ne font absolument rien.

En revanche j'ai maintenant deux "sessions screen" en mémoire qui bouffent plein de CPU (je vois bien des processus screen) et mettent boinc à genoux et que je n'arrive plus à "killer" et je trouve aucune commande pour les fermer !!! Quelle merde ce truc !! J'ai été obligé de rebooter ma VM, formidable.

Bon là il est repassé sous LHC Atlas donc j'ai lâché l'affaire pour le moment, je verrai ton autre proposition avec "affinity"... quand j'aurai le courage :) (en tous cas merci pour les conseils)
Tuer » un screen.
https://doc.ubuntu-fr.org/screen#tuer_un_screen (https://doc.ubuntu-fr.org/screen#tuer_un_screen)
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 November 2019 à 19:36
Tuer » un screen.
https://doc.ubuntu-fr.org/screen#tuer_un_screen (https://doc.ubuntu-fr.org/screen#tuer_un_screen)

comme ça sinon  :D

(https://media.giphy.com/media/M11UVCRrc0LUk/giphy.gif)


Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 November 2019 à 14:23
Sinon y'a cette technique aussi :


(léger problème d'intolérance à la frustration)

@fzs : merci ta page est bien plus claire que celle que j'avais lu, j'en ENFIN compris comment utiliser ce bidule, c'est génial de truc !! (je comprends vite mais faut m'expliquer longtemps :lol:)

Maintenant je me suis fait des screen avec ce que j'utilise le plus souvent : htop, boinctui, mc... et je peux gaiement passer de l'un à l'autre !! en revanche je peux pas utiliser les "control+a n" ou "p" pour passer d'une fenêtre à l'autre, il me dit à chaque fois que y'en a pas d'autre, je dois retourner à la session principale (via "Control+a d") et relancer le screen voulu avec "screen -r xxx" (et je vois bien la liste de mes screen en cours avec "screen -ls") c'est dommage, j'ai raté un truc ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 03 November 2019 à 15:34
c'est dommage, j'ai raté un truc ?
Je ne sais pas pour le moment je n’utilise pas screen.
Mais essaye  Les pages du manuel man screen il y a peut-etre la solution.  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 03 November 2019 à 15:44
sinon tu peux essayer tmux C'est encore plus puissant : https://doc.ubuntu-fr.org/tmux (https://doc.ubuntu-fr.org/tmux)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 November 2019 à 16:04
Oula j'avais ouvert le man screen, des pages et des pages et des pages !!! l'enfer !! :D

Alors ne parlons même pas d'un truc "encore plus puissant" :lol:

Je vais déjà m’acclimater à screen, ce sera pas mal ;)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 03 November 2019 à 18:18
Est-ce qu'il peut être utile de limiter à 1 UT / machine ?
Un peu comme nanohub@home qui ne tourne que si on limite à 1 UT.
Vais essayer sur le pc sur lequel ça plante tout le temps, et HT Off.
 :hello: :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 03 November 2019 à 18:44
Sous Linux, j'ai 5 (t1) qui tournent en // sans problème. Je verrai ce que ça donne quand il attaquera les (t2) ...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 November 2019 à 22:05
Wesh Benoit, bon j'avais pas vu que t'avais mis ce script pour l'affinité sur un des sujet du forum et je l'ai remis sur un autre.

Mieux vaut plus que pas assez.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 04 November 2019 à 15:28
Chtite info. J'ai "hérité" de cette tâche/UT (https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=24915). Mon prédécesseur est ptet encore en train de la calculer. Contrairement aux autres avec des durées raisonnables, celle-ci est donnée pour 35 jours de calcul.
Vu la progression actuelle (0.9% pour 7h38), c'est bien le temps qu'elle devrait mettre.

@damotbe: Ce serait cool si tu pouvais implémenter un report de deadline comme chez RNA - à condition que les tâches envoient des infos intermédiaires au serveur, sinon ça me paraît compromis.
P.ex. je calcule actuellement sur une RNA (http://www.rnaworld.de/rnaworld/workunit.php?wuid=6330822) depuis 97j11h28'. La deadline initiale était au 17 août, sur le serveur du projet elle a été étendue de 3 semaines en 3 semaines (il me semble) et est actuellement au 23 novembre...

Edit: J'ai rien dit :D Elle est déjà terminée et validée :lol:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 04 November 2019 à 17:27
Je crois bien que QCPIA envoie déjà des "trickle messages" il me semble les avoir vu passer parmi les messages boinc, en revanche je sais pas à quoi il les utilise pour le moment.

T'arrive à avoir du RNA toi ?? trop forte !! ça doit faire littéralement des années que j'en ai pas eu, et pourtant le projet est régulièrement vanne ouverte sur mon Mac, mais ptet qu'ils en génèrent plus pour Mac...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 04 November 2019 à 18:30
[HS]La RNA c'était un coup de bol. C'est la première depuis janvier 2018 et la précédente datait de 2013. Vu que c'est de la VM tu devrais pouvoir en choper pour Mac aussi. Mais faut une priorité haute et une demande forcée régulière - ou un coup de bol, comme moi sur ma nouvelle installation Linux :D [/HS]
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 04 November 2019 à 23:59
https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=31#248

(boboviz)
Citer
Le premier mois du projet est terminé. Des résultats préliminaires ? Le code est-il correct ? Avez-vous besoin de plus de puissance de calcul ?

(damotbe)
Citer
Nous avons écrit un article (La diversité chimique de l'ensemble de données limite la généralisation des prédictions d'apprentissage machine) qui a été accepté et sera publié (en libre accès) bientôt. Pour le moment, nous (les crunchers et nous) calculons un meilleur ensemble de données pour former l'IA et nous travaillons sur plusieurs IA (un article est en attente de révision). Nous travaillons également sur une base de données ouverte et des outils pour les contrôles qualité et l'enrichissement des informations chimiques.

Puissance de calcul ? Jamais assez ! ;-p

(Thomas)
Citer
Bonjour,
je suis le chimiste de ce projet. La publication mentionnée par Damotbe a été écrite lors du lancement du projet boinc. Mais je peux extraire quelques phrases de cet article pour montrer ce que nous avons à l'esprit :

" Résumé : L'ensemble de données QM9 est devenu la norme d'or pour les prédictions d'apprentissage machine (ML) de diverses propriétés chimiques. QM9 est basé sur le GDB, qui est une exploration combinatoire de l'espace chimique. Les prédictions moléculaires ML ont récemment été publiées avec une précision comparable à celle des calculs de la théorie fonctionnelle de la densité. De tels modèles de ML doivent être testés et généralisés sur des données réelles. PC9, un nouvel ensemble de données QM9 équivalent (seulement H, C, N, O et F et jusqu'à 9 atomes "lourds") du projet PubChemQC est présenté dans cet article. Une étude statistique des distances de liaison et des fonctions chimiques montre que ce nouvel ensemble de données englobe une plus grande diversité chimique. La régression de la crête du noyau, Elastic Net et le modèle de réseau neuronal fourni par SchNet ont été utilisés sur les deux ensembles de données. La précision globale de la prévision d'énergie est plus élevée pour le sous-ensemble QM9. Cependant, un modèle formé sur PC9 montre une plus grande capacité à prédire les énergies des autres ensembles de données :

" L'ensemble de données QM9 a environ 130 000 petites molécules, alors que notre PC9 a 119 000 (mais a été extrait d'un autre type de calculs). Le problème est que les résultats complets de la QM9 ne sont pas accessibles au public. Ils ont extrait certains résultats des calculs coûteux de la mécanique quantique et ont détruit le journal. Nous ne sommes pas satisfaits du PC9 qui est une simple démonstration qu'il faut plus de diversité, mais pour le moment le projet boinc vise à recalculer les molécules intéressantes de QM9 et PC9 avec le même niveau de calcul cette fois.

Tous les résultats seront disponibles sur la base documentaire quchempedia https:/quchempedia.univ-angers.fr lorsque cette plateforme sera un peu plus robuste (début 2020), à l'image de notre outil de contrôle qualité tel qu'écrit par mon collègue, nous ne sommes pas encore totalement satisfaits de NWChem. Avec le même projet boinc, Damotbe et moi-même, utilisons le gaussien (propriétaire) qui est très efficace. Mais Nwchem est open source...
Nous avons calculé environ 130 k sur 200 k grâce à votre aide !
Pour décembre nous espérons proposer à la communauté de calculer de nouvelles molécules qui n'existent peut-être même pas et ne sont pas stables afin d'aider l'outil d'apprentissage machine à mieux généraliser. Ces nouvelles molécules seront générées par une procédure d'apprentissage automatique. C'est trop long à expliquer ici.

Si vous avez des questions....
Chaleureusement, Thomas
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 05 November 2019 à 10:12
Je crois bien que QCPIA envoie déjà des "trickle messages" il me semble les avoir vu passer parmi les messages boinc, en revanche je sais pas à quoi il les utilise pour le moment.

T'arrive à avoir du RNA toi ?? trop forte !! ça doit faire littéralement des années que j'en ai pas eu, et pourtant le projet est régulièrement vanne ouverte sur mon Mac, mais ptet qu'ils en génèrent plus pour Mac...

Ils servent à rien  :lol:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 09 November 2019 à 10:17
J'ai la désagréable impression que QCPIA que j'ai limité à 2 tâches à la fois, pour avoir des chances que ça fonctionne sur le Mac (et ça fonctionne...) empêche mon boinc de demander des tâches d'autres projets sur les cores inoccupés : là par exemple j'ai WCG en parallèle, ben soit il fait 8 tâches WCG soit il fait 2 QCPIA...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 09 November 2019 à 12:58
J'avoue humblement avoir abandonné ...
Même en libérant BOINC et en limitant à 1 UT / crunchbox pour ce projet, je le retrouvais régulièrement en "attente de mémoire" ou "unmanageable ....." donc à l'arrêt.
 :desole: :jap: :hello:

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 09 November 2019 à 13:17
ça fonctionne vraiment bien pour pas mal de gens, mais c'est vrai que pour certaines configurations ce n'est pas gérable. On commence à avoir assez de recul pour les aspects mémoire. Il faut qu'on regarde ça pour relâcher la pression sur les ressources.

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 09 November 2019 à 13:17
Je précise ce que je voulais dire : si j'ouvre les vannes d'un autre projet en parallèle, du moment que y'a des tâches QCPIA qui tournent (et ça chez moi, ça fonctionne) et ben les autres projets disent

"Sam  9 nov 13:14:31 2019 | wanless2 | Not requesting tasks: don't need (CPU: not highest priority project; AMD/ATI GPU: job cache full)"

parce qu'en fait il y a d'autres tâches QCPIA en attente de calcul, et donc il estime qu'il a besoin de rien alors qu'il a 6 cores qui se tournent les pouces !

Comment on peut résoudre cela ? J'ai bien souvent eu divers projets en parallèle et boinc arrivait bien à répartir la charge et utiliser tous les cores de CPU présents, même avec des réserve de travail sur tous les projets en cours...

On dirait qu'il y a quelque chose dans le paramétrage de QCPIA qui "étouffe" cela...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: TheStressMan le 09 November 2019 à 15:30
Bonjour,

J'ai un I7 qui tourne avec 6 tâches QuChemPedIA, 6 tâches PrimeGrid et 1 GPU Collatz (et 1 WUProp).

 :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 09 November 2019 à 19:44
Chez moi, pour 6 coeurs dispos pour Boinc, je m'étais retrouvée avec 3 QuChem t2 et 1 RNA + les projets NCI. Ça va bien que la VM n'a droit qu'à 4 coeurs et qu'il m'en reste encore 2 autres. Il n'y avait pas eu de lag non plus.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 09 November 2019 à 20:13
Une UT qui m'indique une durée estimée bien supérieure aux précédentes (30 jours au lieu de 7h) !  :eek:
(ça va être juste pour la deadline)
Celle qui est en cours de crunch en est à 1 jour 9h à 98.8 %
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 09 November 2019 à 21:04
Regarde un de mes posts un peu plus haut: j'en avais une donnée pour 35 jours et finalement elle n'a mis que 6 ou 9  heures ;)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 09 November 2019 à 21:11
Oui, je me doute bien qu'elle ne va pas durer 30 jours !  :D
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 10 November 2019 à 10:15
ça fonctionne vraiment bien pour pas mal de gens, mais c'est vrai que pour certaines configurations ce n'est pas gérable. On commence à avoir assez de recul pour les aspects mémoire. Il faut qu'on regarde ça pour relâcher la pression sur les ressources.

 :hello:
Vais relancer sur 1 machine. Tu conseillerais de limiter 1 UT / machine ou de laisser BOINC gérer ?
Ordi ID: 559 - Intel(R) Xeon(R) CPU E3-1241 v3 @ 3.50GHz - W10 PRO - 24 Go RAM - dernière version de Oracle VM
Merci  :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 10 November 2019 à 10:25
 :hello:

1 UT pour tester et contribuer c'est déjà beaucoup pour nous.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 10 November 2019 à 13:48
Bon finalement j'avais retrouvé le Mac avec du WCG et du QCPIA en même temps et les 8 threads occupés... vas comprendre... mais le 2ème QCPIA s'était retrouvé suspendu... et maintenant je constate que WCG phagocyte tout et prend les 8 threads et j'ai 3 QCPIA suspendus maintenant.... :rhaa:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: nabz le 10 November 2019 à 14:11
Je ne sais pas si c'est dû à l'ouverture de la chasse :desole:, mais mes débuts prometteurs n'ont pas eu une suite aussi favorable.

État: Tous (3027) · En cours (8) · Validation en attente (0) · Validation non concluante (0) · Valide (1373) · Invalide (363) · Erreur (1283)

En détails, 82 "vraies" erreurs, le reste c'est des annulations de tâches par le serveur ! :gun:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 10 November 2019 à 14:13
Wé 50% d'erreur c'est pas terrible en effet...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 12 November 2019 à 19:00
Petite info: Le fait de faire 1 QuChemPedIA t2 et 1 Cosmology docker (4 CPU VM) en // double quasiment le temps de calcul des Cosmo. Elles passent de 5 minutes à 9-10 minutes.
Sachant qu'il y a en plus une RNA (1 CPU VM) et 3 tâches NCI (WUprop, QCN, Radioactive) - le tout sur 6 cœurs et sous Linux
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 12 November 2019 à 19:41
Je n'arrive à finir aucune UT depuis quelques jours : elles sont interminables (2 jours passés) et si je dois redémarrer mon ordi (mise à jour ou coupure de courant), elles repartent avec un poucentage plus bas !  :/
(je ne sais pas si c'est lié aux autres projets CPU que je crunche : WCG avec le nouveau ARP ou Help Stop TB - Tbrada - Goofyx NCI...)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 13 November 2019 à 20:40
Je n'arrive à finir aucune UT depuis quelques jours : elles sont interminables (2 jours passés) et si je dois redémarrer mon ordi (mise à jour ou coupure de courant), elles repartent avec un poucentage plus bas !  :/
(je ne sais pas si c'est lié aux autres projets CPU que je crunche : WCG avec le nouveau ARP ou Help Stop TB - Tbrada - Goofyx NCI...)

Je ne saurais pas dire, il y a vraiment des calculs très longs de temps en temps...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 13 November 2019 à 20:57
 :hello:

Notre premier article scientifique en lien avec le projet est disponible en Open Access et les données en Open Data.
"Dataset’s chemical diversity limits the generalizability of machine learning predictions"
https://jcheminf.biomedcentral.com/articles/10.1186/s13321-019-0391-2?fbclid=IwAR0LtM098-vkv0rJnoSV8Yo5ZbuFu4HXpZKsn3ekTTtA4rM0Sb5_HMSSSwI (https://jcheminf.biomedcentral.com/articles/10.1186/s13321-019-0391-2?fbclid=IwAR0LtM098-vkv0rJnoSV8Yo5ZbuFu4HXpZKsn3ekTTtA4rM0Sb5_HMSSSwI)

Avec une traduction du message de Thomas Cauchy qui explique l'article et les recherches à venir
Citer
Bonjour,

Je suis le chimiste de ce projet. La publication mentionnée par Benoit Da Mota a été écrite lors du lancement du projet boinc. Mais je peux extraire quelques phrases de cet article pour montrer ce que nous avons en tête.. :

"Résumé : L'ensemble de données QM9 est devenu la référence en matière de prédiction par Apprentissage Automatique (ML) pour de nombreuses propriétés chimiques. QM9 est basé sur la GDB, qui est une exploration combinatoire de l'espace chimique. Les prédictions à l'aide du ML ont récemment été publiées avec une précision comparable à celle des calculs de la théorie fonctionnelle de la densité. De tels modèles nécessitent d'être reproduits et généralisés sur des données réelles. PC9, un nouvel ensemble de données équivalents à QM9 (seulement H, C, N, O et F et jusqu'à 9 atomes "lourds") issu du projet PubChemQC est présenté dans cet article. Une étude statistique des distances de liaison et des fonctions chimiques montre que ce nouvel ensemble de données couvre une plus grande diversité chimique. Une régression Kernel Ridge, une régression Elastic Net et le modèle de réseau neuronal fourni par SchNet ont été utilisés sur les deux ensembles de données. La précision globale de la prédiction de l'énergie est plus élevée pour le sous-ensemble QM9. Cependant, un modèle entraîné sur PC9 montre une plus grande capacité à prédire les énergies des autres ensembles de données."

Le jeu de données QM9 contient environ 130 000 petites molécules, alors que PC9 en contient 119 000 (mais a été extrait d'un autre type de calculs). Le problème est que les résultats complets de la QM9 ne sont pas accessibles au public. Ils ont extrait certains résultats de calculs de mécanique quantique coûteux et ont détruit le fichier de données. Nous ne sommes pas satisfaits de PC9 qui est une simple démonstration qu'une plus grande diversité est nécessaire.

Pour le moment, le projet Boinc vise à recalculer les molécules intéressantes de QM9 et PC9 avec le même niveau de calcul cette fois. Tous les résultats seront disponibles sur la base de documents QuChemPedia https://quchempedia.univ-angers.fr lorsque cette plate-forme sera un peu plus robuste (début 2020), à l'image de notre outil de contrôle qualité tel que développé par mon collègue.

Nous ne sommes pas encore entièrement satisfaits de NWChem. Avec le même projet Boinc, Benoit Da Mota et moi-même, utilisons Gaussian (propriétaire) qui est très efficace. Mais Nwchem est open source....
Nous avons calculé environ 130 k sur 200 k grâce à votre aide !
Pour décembre, nous espérons proposer à la communauté de calculer de nouvelles molécules qui n'existent peut-être même pas et ne sont pas stables afin d'aider l'outil d'apprentissage machine à mieux généraliser. Ces nouvelles molécules seront générées par une procédure d'apprentissage automatique (IA).

Si vous avez des questions....
Amicalement
Thomas
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 13 November 2019 à 23:47
Tu veux dire ce que j'ai (un peu aidé par deepl) traduit le 04/11 à 23h59 ci-dessus ? :)

En revanche pour l'article complet... il a l'air très joli mais merci, non, sans façon :D

Et encore bravo !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 14 November 2019 à 07:43
Tu veux dire ce que j'ai (un peu aidé par deepl) traduit le 04/11 à 23h59 ci-dessus ? :)

En revanche pour l'article complet... il a l'air très joli mais merci, non, sans façon :D

Et encore bravo !

Je me suis permis d'améliorer la traduction   :lol: :smak:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 14 November 2019 à 10:49
Anéfé :) :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 15 November 2019 à 13:56
Pas une seule UT de finie depuis 8 jours : deadline atteinte et dépassée sur toutes les tâches...
Longueur interminable : bloqué à 99,8 ou 99,9 % et si je redémarre l'ordi (donc Boinc), recommence à 70 %...
(même problème sur plusieurs ordinateurs Windows)
J'arrête le crunch sur ce projet, pour l'instant, désolé !  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 16 November 2019 à 10:21
il semble que VirtualBox ne rend pas correctement la main à la fin de l'exécution. Notre calcul est terminé mais la VM ne s'arrête pas... Les UT > 24h méritent d'être vérifiée pour les abandonner si l'utilisation CPU est faible.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 16 November 2019 à 19:17
J'avais celle ci

Citer
Sam 16 nov 19:13:41 2019 | QuChemPedIA@home | task dsgdb9nsd_nwchem,bath03,011274982,nwchem,1572558056_0 aborted by user

qui prenait 1% de CPU, je l'avais déjà constaté hier mais j'avais laissé coulé, avec de 2 jours de calcul et même pas 90% affiché... donc je l'ai annulé (avec bcp de tristesse)

Celle la

Citer
Sam 16 nov 19:13:27 2019 | QuChemPedIA@home | task dsgdb9nsd_nwchem,bath03,012770060,nwchem,1572558099_0 resumed by user

a plus de un jour et 58% affiché mais elle consomme du CPU... alors je la laisse vivre.

(comme j'en avais 2 j'ai dû les suspendre à tour de rôle pour voir laquelle correspondait à quel processus...)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 01 December 2019 à 04:27
Ah ben il n'y a plus d'UT.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 01 December 2019 à 18:34
Oui, on est en train de faire des choix pour la seconde vague. J'espère qu'on aura de nouveaux jobs dans la semaine  :hyperbon:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 01 December 2019 à 22:30
Il ignore royalement mon app_config :

<app_config>
<project_max_concurrent>1</project_max_concurrent>
</app_config>

Citer
30-Nov-2019 13:07:04 [QuChemPedIA@home] Found app_config.xml

Et j'ai 2 tâches qui tournent en parallèle - et pas en exécution prioritaire...

 :cavachier:

Mmmm j'ai fait "relire les fichiers de config"... et là il en a arrêté une... bien... et j'ai plus que 6 tâches (avec autres projets) qui tournent sur les 8 slots....

 :??:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 December 2019 à 18:00
Un petit batch de jobs pour les gourmands  :hyperbon:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 December 2019 à 20:39
Un petit batch de jobs pour les gourmands  :hyperbon:

En fait, vous êtes des morfales !  :eek:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: titidestroy le 02 December 2019 à 22:34
Ma première UT en cours de calcul  :love:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 02 December 2019 à 22:35
Je suis arrivé trop tard pour ma part...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 03 December 2019 à 08:07
Si les tests sont concluants je vais pouvoir charger en WU  :hyperbon: :hyperbon: :hyperbon:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: titidestroy le 04 December 2019 à 15:24
J'ai reçu 23 UTs en 2 jours mais seules 3 sont validées. Les autres ont toutes été mises en pause car la VM n'était pas "manageable" et elles reprendront plus tard. Il y a quelque choses à faire pour qu'elles redémarrent ?

Je fait tourner du ODLK1 en parallèle.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 04 December 2019 à 22:24
On a remarqué un truc : si la VM est mise en pause, il y a des chances qu'elle n'avance plus jamais... De ce que j'ai pu voir c'est très dépendant de la personne qui calcule.

De mon côté, j'ai résolu le problème en ne calculant que sur un projet à fois (sauf les projets cpu non intensif) et en cochant la case "laisser les tâches processeurs non graphiques en mémoire lorsqu'elles sont suspendues" (dans préférences de calcul, onglet stockage et mémoire). Et bien sûr, la machine n'ai jamais éteinte ou en veille et je ne suspend jamais BOINC...   :pt1cable:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 04 December 2019 à 22:33
Oui, d'habitude, je laisse tourner mes ordis 24/24 et les UT se calculent plus ou moins vite selon les ordis (pas forcément le plus puissant plus vite...)
mais les coupures de courant (imprévisibles) font souvent repartir le calcul à 0 !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: titidestroy le 04 December 2019 à 22:59
On a remarqué un truc : si la VM est mise en pause, il y a des chances qu'elle n'avance plus jamais... De ce que j'ai pu voir c'est très dépendant de la personne qui calcule.

De mon côté, j'ai résolu le problème en ne calculant que sur un projet à fois (sauf les projets cpu non intensif) et en cochant la case "laisser les tâches processeurs non graphiques en mémoire lorsqu'elles sont suspendues" (dans préférences de calcul, onglet stockage et mémoire). Et bien sûr, la machine n'ai jamais éteinte ou en veille et je ne suspend jamais BOINC...   :pt1cable:

Elles ont toutes redémarrées. 3 de plus validées, 3 invalides et les autres sont reparties en "VM job unmanageable". A suivre
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 05 December 2019 à 21:50
Depuis la reprise, 6 marquées invalides sur 180 calculées, aucune marquée en erreur.

Machine en Ryzen sous Ubuntu 18.04.3 LTS en kernel 5.0.0-37 : https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=35

Ça tourne bien avec le manchot ! :)

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 10 December 2019 à 22:04
Vu que tout se passe bien, je suis monté de 6 à 8 tâches en // sur un Ryzen 6C/12C, on ne peux pas monter à plus ?

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maeda le 12 December 2019 à 23:42
 :hello:
Je vous rejoins sur ce projet sur ma machine Linux.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 13 December 2019 à 08:30
Si tu ne veux pas te prendre la tête, je te conseille de ne pas activer les applications beta. Tu n'auras que des tâches qui prennent 1 thread et tu pourras monter à 8 tâches à la fois. Selon ta machine, il faut prévoir un projet complémentaire.

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maeda le 13 December 2019 à 11:28
Merci pour l'info :jap:
Ça chauffe pas mal, donc pour l'instant 1 UT / 1 cœur à la fois.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 13 December 2019 à 15:32
Oui une seule UT à la fois j'en ai fait une règle de vie :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 14 December 2019 à 12:44
Ben déjà faut regarder l'erreur en question, dans le détail de la (des) tâche(s) sur ton compte sur le site.

--> récupères ce log et mets le ici - sauf si c'est si clair que tu n'en as pas besoin :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maeda le 14 December 2019 à 12:51
J'ai eu une invalide, est-ce utile de poster le log dans le forum ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 14 December 2019 à 13:12
J'ai eu une invalide, est-ce utile de poster le log dans le forum ?

Non, seulement les erreurs. Les calculs invalides, c'est normal. Comme Thomas l'explique sur le forum officiel, on a besoin justement de vous pour filtrer. Normalement, les calculs invalides sont rapides, c'est le côté positif de la chose.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maeda le 14 December 2019 à 13:33
OK :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maeda le 14 December 2019 à 21:33
ERR_CPU_VM_EXTENSIONS_DISABLED
Me ferait penser aux instructions de virtualisation CPU désactivées dans le BIOS de la machine hôte.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 14 December 2019 à 22:19
oui, ou bien l'hyperviseur de Windows 10 qui monopolise les instructions de virtualisation... Jr suis pas très Windows, alors je préfère pas trop m'avancer ...
Première chose à regarder : le BIOS et vérifier que les instructions de virtulisation sont activées et les activer le cas échéant.
Ensuite si ça ne change rien, il me semble qu'il faut désactiver hyper-V et redémarrer. Parfois, il faut détacher/rattacher le projet.
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] alain65 le 15 December 2019 à 01:50
salut  :kookoo:
J'ai un Hp Z600 de 10 ans d'âge, il n'y pas d'instructions de virtualisation dans le bios...
J'ai été confronté au problème...
Je suppose que tu as un xéon 55xx ou 56xx et je confirme que ces cpu intègrent la technologie de virtualisation intel.

faut dire que le bios est bizarre sur ces machines. Bien entendu Il y a des paramètres pour la virtualisation, encore heureux
car ces stations de travail s'en servent souvent et que c'était un des critères de choix des ITs d'entreprise. Et en plus des
paramètres, il y en a plus que de coutume (plus que sur un PC de bureau).
Le problème du bios je dirai a la louche entre 2009 et 2012 est qu'ils y ont mis une option pour désactiver la virtualisation
dans "system Security" . C'est vrai qu'on irait pas chercher la... Mais en plus quand on désactive cette fonction cela
retire du bios tous les autres paramètres de virtualisation. Donc on peut croire qu'il n' y a pas d'instructions de virtualisation dans le bios
alors qu'au contraire il y a plus que la "normale".
Donc la procédure est:
1) aller dans "security>system securty" du bios (ou "sécurité>sécurité système" si ton bios est en français)
2) repèrer une ligne contenant : "VT ou Vt ou Vtd ou Vtx" je ne me souviens plus exactement et la mettre sur "enable"(ou activé)
3) ensuite : Fichier>Enregistrer les modifications, puis F10 pour sauvegarder la modification, ne pas démarrer mais éteindre complètement la machine.
4) redémarrer sur le bios, F10 si mes souvenir sont bons.
5) et la, les différents paramètres inhérents à la virtualisation te seront accessibles.

PS:
Je ne suis pas certain, car j'ai vu tellement de bios différents, mais possible que pour voir la ligne de la virtualisation dans
sécurité>sécurité système, il te faille créer un mot de passe. si c'est le cas la création du mot de passe se fait
également dans l'onglet "sécurité" (ou security). Après création du mot de passe (choisi le simple et avec des caractère communs azerty/qwerty), Il faut sauvegarder et éteindre complètement puis rallumer la machine. 

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] alain65 le 15 December 2019 à 02:06
Ooops je viens de voir que tu as modifié tes messages (c'est ça de répondre sur plusieurs fofos à la fois  :cpopossib:, on rate des trucs)

J'ai installé Hyper-V dans Windows, reste plus qu'a recevoir des unités.
En théorie ça ne devrait pas plus fonctionner, car Hyper-V ne fonctionne que si le paramètre d'accélération virtuelle
est en service dans le bios.
Mais ça fait tellement longtemps que je n'ai pas touché a un windows, que je me pose la question. Car des collègues
m'ont dit que W10 était capable de modifier des paramètres du bios...Alors pourquoi pas celui la, perso je trouve que
c'est du grand n'importe quoi, qu'un OS puisse modifier le bios, rien que pour des questions de sécurité... :cpopossib:

Enfin ça m'intéresse de savoir si Hyper-V fonctionne (pour ma culture perso).
Merci ;) 
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: cougarpelardou le 15 December 2019 à 09:04
Mes premiers points sur QchemPedia .  36 points) :moimoi: :oki: :winner: :fccpu:

http://cuculles.myminicity.com/ind (Visitez Saint jean de cuculles)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 15 December 2019 à 11:03
Est-ce que le projet voit VirtualBox?
Il doit y avoir un truc comme ça sur le site sur ton compte=>ordinateur=>détails:

Virtualization    Virtualbox (6.0.10r132072) installed, CPU has hardware virtualization support and it is enabled

C'est juste une piste...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 15 December 2019 à 14:27
 :/
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] alain65 le 15 December 2019 à 16:41

Bonjour  :kookoo:

Virtualbox (6.0.14) installé, le processeur est incompatible avec la virtualisation matérielle

Apparement les 2 processeurs sont trop vieux... 8 ans déjà...

Technologie de virtualisation Intel® (VT-x) ‡
Oui

Technologie de virtualisation Intel® pour les E/S répartis (VT-d) ‡
Oui

Technologie de virtualization Intel®VT-x avec tables de pagination
Oui

https://ark.intel.com/content/www/fr/fr/ark/products/52577/intel-xeon-processor-x5675-12m-cache-3-06-ghz-6-40-gt-s-intel-qpi.html

 :cavapobienmwa:
Bin... Qu'est ce tu veux de plus? déjà 8 ans c'est rien et puis les plus récents n'ont pas plus niveau virtualisation.
Exemple ici un I7 7700K : Processeur Intel® Core™ i7-7700K  (https://ark.intel.com/content/www/fr/fr/ark/products/97129/intel-core-i7-7700k-processor-8m-cache-up-to-4-50-ghz.html)

VT est bien activé dans le bios, j'ai désactivé Hyper-V dans Windows, retour à la config du départ.
Pour les gens qui auraient le même problème que toi tu devrais être un peu plus explicite. ;)
Cela veut il dire que tu as regardé où je t'ai dit et tu as constaté que VT était bien activé?
Ou bien que tu est aller voir et que c'est toi qui l'a activé?
Un truc intéressant aussi, pour ceux qui auraient aussi une workstation Hp de cette génération
serait de savoir si la création d'un mot de passe bios est nécessaire ou non pour avoir accès à tous
les paramètres du bios.

Que tu ais désactivé Hyper-V est une bonne chose de toute façon, je ne vois pas bien a quoi il aurait
servit vu que Damotbe dit : "Pour les plateformes Mac et Windows il est nécessaire d'installer Virtualbox "
Donc pas Hyper-V. Mais dans un but de compréhension d'où se situe ton problème, Hyper-V fonctionnait il?
S'il ne fonctionnait pas des messages d'erreurs auraient pu mettre des windowsiens sur la piste.

Ma conviction est que tes cpu xéons sont adaptés, je sais que le bios n'est pas des plus intuitifs, mais
il y a obligatoirement un réglage a y faire. CF :

Et en plus des paramètres, il y en a plus que de coutume (plus que sur un PC de bureau).
.............
.............
.............
Donc on peut croire qu'il n' y a pas d'instructions de virtualisation dans le bios alors qu'au contraire il y a plus que la "normale".


Tu sais c'est du matériel "pro" il peut faire beaucoup, ce n'est pas pour rien que c'est plus cher qu'un simple desktop... 

 :hello:

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 15 December 2019 à 18:06
Tu veux dire que tu ne sais pas si ça marche parce que tu ne reçois pas d'UTs?

J'ai eu un problème similaire sous linux. BOINC ne voyait plus VB après un redémarrage de l'ordi.
Dans ce cas un redémarrage du client BOINC et une MaJ du projet suffisent.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 15 December 2019 à 18:12
J'ai eu un problème similaire sous linux. BOINC ne voyait plus VB après un redémarrage de l'ordi.
Dans ce cas un redémarrage du client BOINC et une MaJ du projet suffisent.

Ben quoi, ça marche avec Ubuntu ça devrait marcher avec windows.  :D
 :marcp:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 15 December 2019 à 22:20
Dans le doute, reboote ! :siflotte:
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 15 December 2019 à 22:33
Tu veux dire que tu ne sais pas si ça marche parce que tu ne reçois pas d'UTs?

Le projet continu a envoyer des unités ?, même si elles finissent toutes en erreur ?.

 :coffeetime:

Aucune idée, le stagiaire n'a rien dit à ce propos et je n'ai rien fait dans ce but.   :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 15 December 2019 à 22:35
... et toujours pas d'autre stagiaire en vue ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 16 December 2019 à 07:39
... et toujours pas d'autre stagiaire en vue ?

nope  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 16 December 2019 à 22:18
Un seul stagiaire vous manque et tout est dépeuplé...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Ceclo le 17 December 2019 à 23:07
 :kookoo:
Est-ce que je pourrais avoir un code d'invitation svpl?  :sun:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: maxymus83 le 18 December 2019 à 00:42
@Ceclo , le code est sur la page d’accueil,en gras, regardes bien  ;)  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: maxymus83 le 18 December 2019 à 05:44
Si si, quand tu n'es pas loggé au site, il y est  :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Ceclo le 18 December 2019 à 07:39
 :jap:
Merci beaucoup! inscription faite et premières UT téléchargées!!
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Ceclo le 18 December 2019 à 10:29
Merci Maximus83 et Zark! C'est bon j'ai trouvé! même si des UT partent en erreur sur 3 PC sur 4... Il faut que je compare les installations VM et config en général avant d'appeler la cavalerie à la rescousse.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 18 December 2019 à 12:12
(https://media.giphy.com/media/V6GWsIj9WkOzu/giphy.gif)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 22 December 2019 à 10:37
Hello  :hello:

Vous en avez peut-être déjà discuté, mais voici les "problèmes" que je rencontre alors que j'aimerais faire tourner beaucoup plus ce projet :

PC ID: 27 : Impossible de faire tourner : communication with hypervisor failed - W10 - Intel(R) Core(TM) i7-7700HQ CPU - 16 Go RAM DDR4
PC ID: 559 : Temps de calculs restant anormalement long : de 15 heures à 2 jours - W10 - Intel(R) Xeon(R) CPU E3-1241 v3 - 24 Go RAM DDR3
PC ID : 31 : Parfois ça marche, parfois ça marche pas. Quand ça fonctionne, 1 UT < 1 heure. i7 4770 K - W7 - 24 Go RAM DDR3

A noter que les performances CPU des machine 559 et 31 sont "quasiment" identiques.

Pour finir, les possibilités de réglages dans les préférences prêtent un peu à confusion, AMHA.

Je pensais qu'en sélectionnant 1 UT et 6 CPU on calculait en mt. Apparemment ce n'est pas le cas ?

Merci beaucoup !

Bonnes fêtes.

 :hello: :jap: :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 22 December 2019 à 10:56
 :hello:
Hello  :hello:

Vous en avez peut-être déjà discuté, mais voici les "problèmes" que je rencontre alors que j'aimerais faire tourner beaucoup plus ce projet :

PC ID: 27 : Impossible de faire tourner : communication with hypervisor failed - W10 - Intel(R) Core(TM) i7-7700HQ CPU - 16 Go RAM DDR4
PC ID: 559 : Temps de calculs restant anormalement long : de 15 heures à 2 jours - W10 - Intel(R) Xeon(R) CPU E3-1241 v3 - 24 Go RAM DDR3
PC ID : 31 : Parfois ça marche, parfois ça marche pas. Quand ça fonctionne, 1 UT < 1 heure. i7 4770 K - W7 - 24 Go RAM DDR3

A noter que les performances CPU des machine 559 et 31 sont "quasiment" identiques.

Merci de ton aide et de tes retours. Je vois que ce sont uniquement des machines Windows donc avec des VM... ça marche pas bien cette affaire  :cpopossib:
Ceux qui réussissent bien à calculer sur le projet sont sous Linux. J'ai un unique PC sous Windows et franchement c'est mauvais...
Ce que je peux te proposer, c'est d'installer un Linux en VM et de faire tourner Boinc depuis la VM.

Pour finir, les possibilités de réglages dans les préférences prêtent un peu à confusion, AMHA.

Je pensais qu'en sélectionnant 1 UT et 6 CPU on calculait en mt. Apparemment ce n'est pas le cas ?

les préférences sont des limites, pas des paramètres de calcul. Ce sont des réglages de base des limites (inclus dans le code du BoincServer de Berkeley).

Joyeuses fêtes  :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 22 December 2019 à 11:51
"c'est mauvais" : je dirais plutôt "c'est compliqué à bien stabiliser et ça nécessite pas mal d'effort de développement pendant le lancement" du projet, et je te rappelle que ça fait un bail que tu n'as plus de développeur sur ce projet.

LHC y sont très bien arrivé, mais il ont mis longtemps... donc rien que ça, en effet, ça remet un peu en cause l'intérêt du "maintenance plus simple car une seule appli", car s'il faut X fois plus de temps pour arriver à le stabiliser par rapport à des applis classiques...

Mais d'un autre côté combien de projets ne proposent qu'une appli sous windows parce qu'ils n'ont pas les ressources ni les compétences pour proposer une appli linux ou macOS ? (sans parler de android et autres clients exotiques) (qui d'un autre côté ne supportent pas le VB :))

Donc ça se discute.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 22 December 2019 à 14:23
Merci pour ton retour :)

Comme je n'ai plus trop le temps ni l'envie de chercher comment ça marche tout ça,
et comme j'ai tout oublié de Ubuntu, ... je préfère passer par un échange de temps de calcul  :coffeetime: :D

Si quelqu'un veut bien cruncher du QuChemPedIA pour moi, je cruncherai pour lui / elle.

 :hello: :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 22 December 2019 à 16:08
Tiens, ça me fait pensé que je n'ai encore jamais crunché sur ce projet.

Un C2D avec 4 ou 6 GB de RAM, ça passe ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 22 December 2019 à 17:06
Si tu limites à une ou deux UTs, ça doit marcher, la consommation de RAM de l'application native est très raisonnable: 200Mo selon WUProp: http://wuprop.boinc-af.org/results/graph_ram.py?projet=QuChemPedIA@home&application=NWChem&plateforme=all

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 22 December 2019 à 17:12
TY, dans mes souvenirs c'était plus gourmand.
Je mets ça en parallèle de yoyo sur une de mes machines. (https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=991) :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 22 December 2019 à 18:12
Je fais tourner le projet là dessus (https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=565) et ça se passe très bien  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 24 December 2019 à 19:10
Cette tâche (https://quchempedia.univ-angers.fr/athome/result.php?resultid=275259) sur mon Mac en était à 1j 15h écoulé / temps de calcul 41mn / CPU moyen utilisé 1.74% (rapporté par BoincTasks, là le process utilise 1.6%)....

(http://pix.toile-libre.org/upload/original/1577213645.png)

Je l'ai tué sauvagement. Salope.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maeda le 24 December 2019 à 23:11
Tu te laisses emporter par la dignité :D

https://invidio.us/watch?v=ntshMBCgxgA (https://invidio.us/watch?v=ntshMBCgxgA)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: cougarpelardou le 26 December 2019 à 08:41
Je quitte le projet quasiment toutes les  taches mise en pause ad vitam eternam par VM.

 :priz2tet: :hello:

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 26 December 2019 à 22:47
Tu te laisses emporter par la dignité :D

https://invidio.us/watch?v=ntshMBCgxgA (https://invidio.us/watch?v=ntshMBCgxgA)
:lol: je connaissais pas (ce film)

Je quitte le projet quasiment toutes les  taches mise en pause ad vitam eternam par VM.

 :priz2tet: :hello:
Moi j'ai un taux de succès fort honorable sur la VM mumux (https://quchempedia.univ-angers.fr/athome/results.php?hostid=34&offset=0&show_names=0&state=4&appid=) (non VB) et sur le vieux Mac (https://quchempedia.univ-angers.fr/athome/results.php?hostid=42&offset=0&show_names=0&state=4&appid=) (VB) même s'il souffre plus.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: cougarpelardou le 27 December 2019 à 15:35
Moi je suis sur windaube 10  :D Mais bon pour pour jouer à World of Tanks ou Warships c'est mieux que mumux ...

Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 27 December 2019 à 20:13
Moi je suis sur windaube 10  :D Mais bon pour pour jouer à World of Tanks ou Warships c'est mieux que mumux ...


J'ai pas relancé depuis plus d'un an, mais laisse savoir ton pseudo wargaming, au cas où je réinstallerai :o
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 27 December 2019 à 22:19
Bon rebelote une tâche après 15h qui ne consomme plus de CPU depuis vas savoir combien de temps (moyenne CPU 1,5% pour BT) et qui passe son temps à écrire des breakpoint pour rien dans ses log... j'ai décidé de faire une pause QCPIA sur le mac et j'ai tué toutes les tâches en attente, je laisse que sur le mimux.

Wait & see.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: cougarpelardou le 28 December 2019 à 14:38
 Pseudo HansAncelin mais en ce moment je n'ai pas le temps, je fais du montage video à partir des videos que j'ai prise lors de mes voyages en porte containers comme passagers.

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 08 January 2020 à 16:50
J'ai un Ryzen qui est 6c/12th, il est limité à 8 tâches simultanées, est-il possible d'augmenter le nombre de tâches en // ?

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 08 January 2020 à 18:57
Sur le site du projet, dans ton compte, préférences du projet [ https://quchempedia.univ-angers.fr/athome/prefs.php?subset=project ]: tu peux choisir le nombre de tâches et le nombre de CPU utilisés
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 13 January 2020 à 11:12
Le site semble down de mon côté  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 13 January 2020 à 21:32
Le site est revenu mais j'ai beaucoup d'UTs invalides, je ne sais pas si c'est normal damotbe ?

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Xenon le 30 January 2020 à 20:50
Vu sur le forum du site QuChemPedIA, 

Publié par: 30 Jan 2020, 9:03:31 UTC

Dear Crunchers,

Yesterday, I had to suspend an account for two weeks and remove credits, for obvious credit cheating. I'm quite annoyed that instead of doing science, I have to deal with this kind of behavior. We're small and we're short on time and it doesn't help scientific research...

The current credit system is too easy to fool, so I'm going to move to something simpler, robust and more generous on average: fixed credits. For short tasks (such as od9), I'm going to award 200 credits. This change requires draining the task queue. At that time, I will submit new tasks. These new tasks will be the opportunity to deploy the new code with checkpoints, system signals and affinity management for large systems (>32 cores). Some errors are to be expected, I can't test everything.

The last point concerns the requests for Gridcoin. I've been asked by the developers and by some of you. I am not against this possibility, but three points do not allow for the moment to be whitelisted. First, I can't guarantee to always have tasks waiting to be calculated. Secondly, the incentive to cheat will increase and I find that increasing the quorum is a waste of resources. Thirdly, I'm struggling with the server to keep it up. The upcoming arrival of larger molecules should settle the first point. For the second point, we are thinking about a validation by analyzing the result. I have already made many optimizations for the third point, at the moment it's much better.

Kindly
Benoit Da Mota

Et sa traduction fraçaise pour les anglophobes :

Publié par: 30 janv.2020, 9:03:31 UTC

Chers Crunchers,

Hier, j'ai dû suspendre un compte pendant deux semaines et retirer des crédits, pour fraude de crédit évidente. Je suis assez ennuyé qu'au lieu de faire de la science, je doive faire face à ce genre de comportement. Nous sommes petits et nous manquons de temps et cela n'aide pas la recherche scientifique ...

Le système de crédit actuel est trop facile à tromper, je vais donc passer à quelque chose de plus simple, robuste et plus généreux en moyenne: les crédits fixes. Pour les tâches courtes (comme od9), je vais attribuer 200 crédits. Cette modification nécessite de vider la file d'attente des tâches. À ce moment, je soumettrai de nouvelles tâches. Ces nouvelles tâches seront l'occasion de déployer le nouveau code avec des points de contrôle, des signaux système et une gestion des affinités pour les grands systèmes (> 32 cœurs). Des erreurs sont à prévoir, je ne peux pas tout tester.

Le dernier point concerne les demandes de Gridcoin. J'ai été demandé par les développeurs et par certains d'entre vous. Je ne suis pas contre cette possibilité, mais trois points ne permettent pas pour l'instant d'être mis sur liste blanche. Premièrement, je ne peux pas garantir d'avoir toujours des tâches en attente de calcul. Deuxièmement, l'incitation à tricher augmentera et je trouve que l'augmentation du quorum est un gaspillage de ressources. Troisièmement, je me bats avec le serveur pour le maintenir. L'arrivée prochaine de molécules plus grosses devrait régler le premier point. Pour le deuxième point, nous pensons à une validation en analysant le résultat. J'ai déjà fait de nombreuses optimisations pour le troisième point, pour le moment c'est beaucoup mieux.

Amicalement
Benoit Da Mota
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 30 January 2020 à 21:08
Rho ben alors Benoit pourquoi tu viens pas nous en parler ici ??

Moi je suis tout à fait pour le fait que tu affectes des crédits comme c'est le mieux pour toi et ton projet (sachant qu'il y aura toujours des connards tant que le monde sera monde) et pour que tu n'ouvres pas la porte à GC !!! :D

Bon courage et comme toujours n'hésites pas à nous solliciter pour tout test nécessaire !!

Cheers ! Haut les coeurs !


PS : merci Xenon pour l'info et la trad
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 30 January 2020 à 21:32
Benoit... = @damotbe
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 31 January 2020 à 00:29
Ben oui, sa signature explique son pseudo :D

(c'est la faute à Xenon ! c'est la faute à Xenon ! :lol:)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Xenon le 31 January 2020 à 01:45
Nemo auditur propriam suam turpitudinem allegans
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 31 January 2020 à 18:09
Moi mon extraordinaire souvenir c'est Xenon 2 sur Amstrad PC 8086

(https://i2.wp.com/www.rocketbox.fr/wp-content/uploads/2015/07/Xenon-2-Megablast.jpg)

Comment qu'il était trop bon ce jeu !!
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Xenon le 31 January 2020 à 21:34
Bravo Zark, mon pseudo fait effectivement référence à ce flipper. C'est le premier sur lequel j'ai vraiment appris à jouer. Pour l’époque, c’est-à-dire il y presque 40 ans, il était plutôt high tech comme on dit aujourd’hui. Nostalgie…
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 01 February 2020 à 18:10
Coucou  :hello:

Le forum du projet et l'administration du serveur me prends beaucoup de temps... Et avant ça, il y a les enseignements et la recherche.

J'ai eu un gros problème de crédits avec un utilisateur qui avait beaucoup de VM très très lentes pour stocker des WUs (J'ai été un peu rude avec lui...).
Je vais changer vers des crédits fixes pour éviter ce genre d'effet. En plus, je pourrais ajuster les points, alors que je n'avais aucune maîtrise avec l'autre système. L'idée c'est aussi d'être plus généreux en moyenne. J'ai aussi implémenté un validateur, plutôt que de vérifier plus tard (je donnais des points et avant d'utiliser les résultats je nettoyais). C'est pas parfait, mais ça fait bien l'affaire. J'ai des nouveaux jobs prêts depuis quelques jours déjà, mais je vais attendre le vidage des tâches en cours pour tester et changer le système de crédit.

De nombreux utilisateurs Gridcoin demandent que le projet soit "whitelisté", ce qui est compréhensible mais qui m'inquiète un peu. C'est aussi pour ça que je dois prendre certaines dispositions.

Amicalement.
Benoit
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 02 February 2020 à 12:58
 :kookoo: :+1:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 02 February 2020 à 15:40
Je me permets de donner mon avis sur GridCoin, il me parait excessivement dangereux d'être "whitelisté". Cela risque de créer un afflux énorme de personnes qui vont avoir de grosses attentes, voir des exigences.

Le projet ne me semble pas avoir les ressources pour encaisser cela. Je trouve qu'il faut bien estimer le ratio gain de puissance/temps consacré avant de se lancer, comme tu dis, l'administration du forum et du serveur prennent des temps énormes, sont parfois répétitifs, pour un gain pas toujours évident.

Bon courage et bonne continuation.

Je garde les vannes ouvertes sur deux machines Ryzen sous Ubuntu mais j'ai constaté que tu as déjà de la puissance à disposition en interne ;)

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Azlem le 09 February 2020 à 13:12
Bonjour, je me suis inscrit sur ce projet il y a peu, mais après quelques WU réussies (enfin je suppose puisque j'ai eu des points) toutes mes autres WU se terminent ainsi.

09/02/2020 12:10:21 | QuChemPedIA@home | Task od9_athome_b3lyp-321gd,batch56,000564247,nwchem,1580803032_0 postponed for 86400 seconds: VM job unmanageable, restarting later.

Bien entendu, le travail ne reprends jamais, et même si je redémarre BOINC, le travail reprends effectivement, mais s'arrête à nouveau après quelques heures de la même manière.

J'ai coupé la demande de nouveau travail et j'essaye les tâches une par une comme j'ai pu le lire ça et là, mais rien n'y fait. Peut-être mon matériel n'est il pas de taille pour ce projet  :D

Quelqu'un à déjà vécu cette situation ? Est-il possible pour moi d'arranger les choses ou devrais-je annuler mon stock de tâches ?

Merci et bonne journée à tous !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 09 February 2020 à 13:33
 :hello:
Le projet est en phase beta.
Plus précisemment il y a des problèmes de VM sous Windows et ils y travaillent...
Celà ne vient pas de toi.

La tâche en question:
https://quchempedia.univ-angers.fr/athome/result.php?resultid=1096851

Il peut être interressant de suivre le forum du projet (https://quchempedia.univ-angers.fr/athome/forum_index.php) pour se renseigner sur l'avancement des choses.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Azlem le 09 February 2020 à 14:08
J'avais dû mal comprendre alors, je pensais que la beta concernait les unitées NWChem long uniquement et que celles que j'ai étaient déjà "rôdées" en quelque sorte. Du coup pour celles qu'il me reste, dois-je persister à essayer de les calculer ou devrais-je les annuler pour ne pas les bloquer ? (désolé mais je ne m'y connait pas trop en terme de fonctionnement du calcul distribué et je ne voudrait pas faire de la rétention de tâches que je ne pourrais traiter correctement)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 09 February 2020 à 14:24
C'est à toi de voir.
Tu en a certaines qui se sont terminées...
Tu peux savoir si le CPU calcule vraiment dans les propriétés de la tâche dans BOINC Manager.

Je ne pense pas que celà gène le projet si tu gardes les tâches au contraire celà permet de les tester.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 09 February 2020 à 18:44
Bon j'ai recommencé a  cruncher sur le projet.  :hyperbon:
L'utilisation processeur est a 100% et ça c'est bien.  :jap:
Citer
8 Feb 2020, 13:05:02 UTC    9 Feb 2020, 15:15:21 UTC    Terminé et validé    1,180.73    1,136.70    200.00    NWChem v0.17 (t1)
x86_64-pc-linux-gnu

Je vais rester un bon moment.  :kookoo:
 
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 09 February 2020 à 19:45
C'est un problème classique des projets à VM quand il sont pas encore stable, le développement / réglage n'est pas facile de ce point de vue là, si tu lis les 12 précédentes pages de ce topic je suis sûr qu'on en parle :siflotte:

(et on a même dû citer des threads d'autres projets qui parlaient de cette problématique)

Sur linux le stagiaire avait eu le temps de développer une appli sans VB, et elle est plus stable.

Mais c'est parce que l'appli a d'abord été faite sous VB qu'elle a pu être proposée tout de suite sur les 3 OS de base en peu de temps (ce qui ne se serait pas produit avec une appli native par OS), et puis le stagiaire est parti, et il n'a pas été remplacé...

On se rend pas assez compte de l'importance d'un bon stagiaire :gnu:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 10 February 2020 à 23:47
Bon ben j'ai récupéré une flopée de tâches (https://quchempedia.univ-angers.fr/athome/results.php?hostid=34&offset=20&show_names=0&state=0&appid=) sur la VM minux, toutes des "NWChem v0.17 (t1) x86_64-pc-linux-gnu", et ben ça chie : 2 qui sont à 100% depuis plus d'un jour et prennent 0 de CPU chacune, j'avais constaté ça hier et je m'étais dis "laissons leur une chance" et donc en fait plus d'un jour à 0% CPU x 2 = 0 = caca...

stderr.txt vide dans le slot + dernière mise à jour de fichier dans le slot hier à 20h....

J'ai donc tué ces deux là en voyant ce qui va se passer avec les autres.

... après quelques minutes elles prennent toujours 0% de CPU, le % d'avancement des tâche progresse rapidement (j'en suis à plus de 10% chacune le temps d'écrire ces lignes) et toujours 0 CPU, même comportement des fichiers dans le slot (rien dans le stderr.txt)..........
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 11 February 2020 à 11:17
Bon ben j'ai récupéré une flopée de tâches (https://quchempedia.univ-angers.fr/athome/results.php?hostid=34&offset=20&show_names=0&state=0&appid=) sur la VM minux, toutes des "NWChem v0.17 (t1) x86_64-pc-linux-gnu", et ben ça chie : 2 qui sont à 100% depuis plus d'un jour et prennent 0 de CPU chacune, j'avais constaté ça hier et je m'étais dis "laissons leur une chance" et donc en fait plus d'un jour à 0% CPU x 2 = 0 = caca...

stderr.txt vide dans le slot + dernière mise à jour de fichier dans le slot hier à 20h....

J'ai donc tué ces deux là en voyant ce qui va se passer avec les autres.

... après quelques minutes elles prennent toujours 0% de CPU, le % d'avancement des tâche progresse rapidement (j'en suis à plus de 10% chacune le temps d'écrire ces lignes) et toujours 0 CPU, même comportement des fichiers dans le slot (rien dans le stderr.txt)..........

La 0.17 et 0.18 marche très très fort pourtant... (99,1% de succès sur 24h pour environ 9000 jobs)
Tu as installé quoi comme distribution Linux ? (perso, j'ai la LinuxMint 19.3 sur VirtualBox qui fonctionne très bien)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 11 February 2020 à 14:24
Ben c'est la même distrib débian depuis le début avec laquelle j'ai déjà fait pas mal de QCPIA... !?

A part faire des update/upgrade sur les paquets, je n'ai rien changé depuis que j'ai cette VM nunux.

La mort dans l'âme j'ai annulé toutes les tâches en attente avant de partir ce matin, ça faisait quand même bientôt 2 jours qu'il ne calculait plus rien... (les tâches arrivaient à 100% sans rien faire puis tournaient jusqu'à ce que mort s'en suive).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 11 February 2020 à 21:43
Cool j’en ai choper une longue.  :hyperbon:
Citer
   11 Feb 2020, 18:46:26 UTC    12 May 2020, 18:46:26 UTC    En cours    ---    ---    ---    NWChem long v0.18 (t1)
x86_64-pc-linux-gnu

Date limite 12 mai,je l'aurais fini bien avant.  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 12 February 2020 à 09:40
Vérifie qu'elle fait bien des calculs :siflotte:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 12 February 2020 à 17:37
Ben c'est la même distrib débian depuis le début avec laquelle j'ai déjà fait pas mal de QCPIA... !?

A part faire des update/upgrade sur les paquets, je n'ai rien changé depuis que j'ai cette VM nunux.

La mort dans l'âme j'ai annulé toutes les tâches en attente avant de partir ce matin, ça faisait quand même bientôt 2 jours qu'il ne calculait plus rien... (les tâches arrivaient à 100% sans rien faire puis tournaient jusqu'à ce que mort s'en suive).

Si je comprends bien, ça marchait avant...

La grosse différence c'est que maintenant, mon wrapper gère les signaux pour suspendre et reprendre, ainsi que les checkpoints et la progress bar. Il faudrait regarder s'il y a des processus endormis portant les doux noms de : mpirun ou nwchem
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 12 February 2020 à 20:14
Han du Open MPI ! J'en fais encore des cauchemars du temps où c'était utilisé sur FAH ... :priz2tet:

Longue vie aux threads ! :sun:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 13 February 2020 à 09:49
Une idée du temps de calcul d'une UT longue qui me prend 4 threads ? J'en suis à 7h.

L'UT a déjà été calculé avec succès sur un Ryzen 1700 en ~11h.

Elle n’apparaît pas dans WuProp, est-elle regroupée avec les NWChem "standard" ?

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 13 February 2020 à 17:45
Si je comprends bien, ça marchait avant...
Vi.

Citer
La grosse différence c'est que maintenant, mon wrapper gère les signaux pour suspendre et reprendre, ainsi que les checkpoints et la progress bar. Il faudrait regarder s'il y a des processus endormis portant les doux noms de : mpirun ou nwchem
Ben là j'avais tout viré, je vais laisser un peu de temps et je testerai à nouveau.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 15 February 2020 à 02:31
Citer
Service Unavailable

The server is temporarily unable to service your request due to maintenance downtime or capacity problems. Please try again later.
Apache/2.4.25 (Debian) Server at quchempedia.univ-angers.fr Port 443
:??: :??:

De nouveau en ligne.  :love:
Citer
   13 Feb 2020, 15:11:32 UTC    15 Feb 2020, 7:08:50 UTC    Terminé et validé    143,838.00    256,139.70    5,000.00    NWChem long v0.18 (t4)
x86_64-pc-linux-gnu
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 15 February 2020 à 15:02
Citer
Service Unavailable

The server is temporarily unable to service your request due to maintenance downtime or capacity problems. Please try again later.
Apache/2.4.25 (Debian) Server at quchempedia.univ-angers.fr Port 443
:??: :??:

De nouveau en ligne.  :love:
Citer
   13 Feb 2020, 15:11:32 UTC    15 Feb 2020, 7:08:50 UTC    Terminé et validé    143,838.00    256,139.70    5,000.00    NWChem long v0.18 (t4)
x86_64-pc-linux-gnu

Le serveur (une machine virtuelle KVM) se suspend à 2h00 pour une sauvegarde journalière (entre 1h et 2h), puis se remet en marche.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 15 February 2020 à 16:12
C'est un détecteur de couchent-tard :D
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 15 February 2020 à 16:30
C'est un détecteur de couchent-tard :D
Pas du tout c'est de l'insomnie et c'est pas du tout la même chose et c'est pas marrant, je vous pris de me croire on veut dormir et y arrive pas ,alors  :rhaa: :rhaa:  :priz2tet: :priz2tet:
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 15 February 2020 à 22:07
Pas du tout c'est de l'insomnie et c'est pas du tout la même chose et c'est pas marrant, je vous pris de me croire on veut dormir et y arrive pas ,alors  :rhaa: :rhaa:  :priz2tet: :priz2tet:

Je compatis...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 16 February 2020 à 13:49
Pas du tout c'est de l'insomnie et c'est pas du tout la même chose et c'est pas marrant, je vous pris de me croire on veut dormir et y arrive pas ,alors  :rhaa: :rhaa:  :priz2tet: :priz2tet:
Profites-en pour développer un projet boinc ! ;)

Ou alors fais stagiaire (de nuit) chez damotbe, il en cherche un :D

Mais bon trêve de rigolade oui je suppose bien que ça doit être difficile à vivre... essaye la thérapie par le froid (https://www.blogblogyaquelquun.com/bref-jai-teste-la-cryotherapie/).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 18 February 2020 à 10:15
J'ai chopé une UT NWChem long (t1) !  :D
Elle crunche depuis hier : 14 % - 14h... (sur mon vieux Centrino Duo sous Ubuntu)  :coffeetime:

[edit]
Bon... "annulé par le serveur" !  :/
[/edit]
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 18 February 2020 à 12:08
C'est assez moche d'annuler des tâches en cours de calcul...

Je dirais même plus c'est pas très très gentil !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 18 February 2020 à 18:52
Citer
Dear crunchers.

Thank you very much ! You are a really great help.

Initially, only two hundred "NWchem long" workunits should have been submitted for testing. Your numerous results and also the numerous failures allow us to better evaluate parameters for this new simulation. I still have to write some scripts for the new inputs, but I should be able to submit jobs soon. Don't hesitate to cancel in progress workunits (NWchem long).

Cheers,

Benoit @damotbe
Citer
Chers cruncheurs.

Merci beaucoup ! Vous êtes vraiment d'une grande aide.

Au départ, seules deux cents unités de travail "NWchem long" auraient dû être soumises à des tests. Vos nombreux résultats et aussi les nombreux échecs nous permettent de mieux évaluer les paramètres de cette nouvelle simulation. Je dois encore écrire quelques scripts pour les nouvelles entrées, mais je devrais pouvoir soumettre des travaux bientôt. N'hésitez pas à annuler les unités de travail en cours (NWchem long).

A la vôtre,

Benoit @damotbe

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: titidestroy le 26 February 2020 à 10:39
Je viens de me remettre à calculer sur le projet et mes premières tâches validées quelque soit leur durée se créditent toutes de 200 points.
C'est nouveau ? J'ai loupé quelque chose ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 26 February 2020 à 10:58
Regarde dans l'onglet "notifications" de ton BM, tu devrais y trouver un message de damotbe où il explique qu'il va passer à des crédits fixes.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 27 February 2020 à 18:59
J'ai de nouvelles NWChem Long (sur plusieurs ordis)
et une s'est finie et crédite 5000 points (200 pour les NWChem) !  :sun:
https://quchempedia.univ-angers.fr/athome/result.php?resultid=2192613
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: erik le 27 February 2020 à 19:23
J' ai 4 longues qui sont parties en erreur, apparemment après un redémarrage de l'ordi  :/

https://quchempedia.univ-angers.fr/athome/result.php?resultid=2192844
https://quchempedia.univ-angers.fr/athome/result.php?resultid=2192634
https://quchempedia.univ-angers.fr/athome/result.php?resultid=2192533
https://quchempedia.univ-angers.fr/athome/result.php?resultid=2192505
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 28 February 2020 à 14:51
à chaque fois le plantage est sur l'étape TD-singlet. Pendant mes tests sur ma machine, j'ai eu des problèmes avec les checkpoints à cette étape, mais je pensais avoir résolu le problème...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 11 March 2020 à 20:37
Salut damotbe,

je viens de passer le cap du million sur QuChemPedIA mais je n'ai malheureusement plus accès à la machine Ryzen 6C/12T qui a permis cela.
J'espère pouvoir reprendre après le RAID sur une autre machine plus petite (4C/8T) et moins disponible malheureusement  :/

Bonne continuation d'ici là !
 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 12 March 2020 à 11:21
merci  :hello:
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Davlabedave le 15 March 2020 à 08:11
Citation de: fzs600
Pas du tout c'est de l'insomnie et c'est pas du tout la même chose et c'est pas marrant, je vous pris de me croire on veut dormir et y arrive pas ,alors  :rhaa: :rhaa:  :priz2tet: :priz2tet:
Bienvenue au club , du coup, j'ai pris un taf de nuit   :priz2tet: et suis un zombie le jour  :D
Edit : J'ai dormi une heure en cette nuit de repos  :clafete: :bipbip:
Possible d'avoir un code ? Marci
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 15 March 2020 à 09:14
Le code d'invitation se trouve sur la page d'accueil du projet, juste sous le titre ;)
Citer
Invitation code : 3VwMu3-eTCg32
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Davlabedave le 15 March 2020 à 09:28
Le code d'invitation se trouve sur la page d'accueil du projet, juste sous le titre ;)
Citer
Invitation code : 3VwMu3-eTCg32
Ca m'apprendra a allez suis join directement  :D , après c'est une seconde nature des que je vois ou j'entend joint je cours  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 15 March 2020 à 14:36
Pas sûr que ça améliore la qualité du crunch :lol:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: zelandonii le 17 March 2020 à 07:50
C'est quoi ce code ?! Ou est-ce qu'il est demandé ?
Pareil que pour Davlabedave, je devrais poser plus de question avant de rejoindre... :cpopossib:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 17 March 2020 à 08:42
C'est le code d'invitation dont on a besoin pour créer son compte sur le projet. Au début, pour l'alpha-testing, il était confidentiel, maintenant il sert à éviter les spammeurs qui ne crunchent pas.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: zelandonii le 17 March 2020 à 11:20
Merci @Modesti,

Mon compte a bien été créé et sans code d'invitation...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Jeannot Le Tazon le 20 March 2020 à 22:27
 :kookoo: Je me suis inscrit !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 30 March 2020 à 10:24
Je relance une machine dessus après le RAID et je vois que certaines tâches déjà anciennes sont toujours en "attente de validation", comme celle-ci pra exemple : https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=1168746

Normal ? Pas normal ?

 :hello:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 30 March 2020 à 10:30
Je relance une machine dessus après le RAID et je vois que certaines tâches déjà anciennes sont toujours en "attente de validation", comme celle-ci pra exemple : https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=1168746

Normal ? Pas normal ?

 :hello:
Normal.  :kookoo:
Citer
État: Tous (7141) · En cours (456) · Validation en attente (328) · Validation non concluante (92) · Valide (4925) · Invalide (426) · Erreur (914)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 30 March 2020 à 10:35
Pareil : 31 en attente !  :coffeetime:

... d'un autre côté, c'est du quorum 2, donc si les cruncheurs ont abandonné (ou mis de côté) des tâches pour le raid (ou autre challenge)...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 31 March 2020 à 08:07
Oui, la complétion des séries de tâches est vraiment longue... Certains prennent des tâches et ne les feront jamais et il faut attendre la deadline pour redonner la tâche à un autre participant. Par manque de chance, c'est possible que ce processus se répète plusieurs fois. Je ne sais pas s'il existe un moyen de régler le problème en gardant le quorum de 2 :??:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 31 March 2020 à 08:19
Oui, la complétion des séries de tâches est vraiment longue... Certains prennent des tâches et ne les feront jamais et il faut attendre la deadline pour redonner la tâche à un autre participant. Par manque de chance, c'est possible que ce processus se répète plusieurs fois. Je ne sais pas s'il existe un moyen de régler le problème en gardant le quorum de 2 :??:
En soi le Pending n'est pas un probleme,a partir du moment ou UT a été calculé avec succès pourquoi s'alarmer ?  :??:
Ut est la en Pending bien au chaud en attente de validation,ma fois c'est pas la fin du monde.   :coffeetime:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 31 March 2020 à 08:28
Ça peut parfois être très long... Cf. ma tâche RNA (http://www.rnaworld.de/rnaworld/workunit.php?wuid=6330822), j'espérais que mon wingman la terminerait peu de temps après moi, mais on dirait qu'il prend son temps (au moins, c'est toujours le même :D )
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 31 March 2020 à 08:59
Ça peut parfois être très long... Cf. ma tâche RNA (http://www.rnaworld.de/rnaworld/workunit.php?wuid=6330822), j'espérais que mon wingman la terminerait peu de temps après moi, mais on dirait qu'il prend son temps (au moins, c'est toujours le même :D )
Oui avec RNA on est sur une autre planète.  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 31 March 2020 à 09:29
L'unité que je montrai n'est actuellement pas distribuée, c'est plutôt cela que je voulais souligner.

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 31 March 2020 à 12:48
Mais que veut dire le "non distribué" du 3ème homme dans la liste de tâches ? c'est pas lui le problème plutôt ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 31 March 2020 à 13:02
AMHA, ça veut dire qu'une tâche est prête pour cette UT (quorum 2) mais que personne ne l'a encore chargée !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 31 March 2020 à 13:30
AMHA, ça veut dire qu'une tâche est prête pour cette UT (quorum 2) mais que personne ne l'a encore chargée !
... ou que Boinc ne l'a pas encore  mise dans la liste de distribution
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: nabz le 31 March 2020 à 15:46
Oui, la complétion des séries de tâches est vraiment longue... Certains prennent des tâches et ne les feront jamais et il faut attendre la deadline pour redonner la tâche à un autre participant. Par manque de chance, c'est possible que ce processus se répète plusieurs fois. Je ne sais pas s'il existe un moyen de régler le problème en gardant le quorum de 2 :??:

En tant qu'admin de projet, tu peux essayer de distribuer les tâches à 3 voire 4 utilisateurs différents, tout en restant en quorum 2.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 01 April 2020 à 12:58
En tant qu'admin de projet, tu peux essayer de distribuer les tâches à 3 voire 4 utilisateurs différents, tout en restant en quorum 2.

ça doit être un réglage dans un obscur script ou fichier de config... C'est vraiment la croix et la bannière à administrer un serveur Boinc!
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: GuL le 01 April 2020 à 21:54
Salut Damotbe,
Tu dois aussi pouvoir diminuer la durée maximale de la tache, si tu veux pouvoir la renvoyer plus vite.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 April 2020 à 11:43
Salut Damotbe,
Tu dois aussi pouvoir diminuer la durée maximale de la tache, si tu veux pouvoir la renvoyer plus vite.

Salut GuL  :hello:
tu parles de la deadline je suppose. J'ai essayé de trouver un compromis pour que les volontaires ne soient pas découragés par le risque de rendre en retard.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Xe120 le 02 April 2020 à 18:52
Tu peux étudier la possibilité d'extension de deadline avec l'envoi de trikkles, ça permet de garder les caches restreints et de ne pas être méchant avec les vieux tacos.  :hello:
c.f. primegrid qui l'utilise, il y a peut-être quelques admins qui trainent sur le discord primegrid qui pourront te filer un coup de main
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 April 2020 à 10:42
Je savais pas que PG utilisait les trickles, je me souvenais juste de CPDN.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 03 April 2020 à 14:52
j'ai déjà essayé les trickles... ça demande trop de d'investissement et ça ne répond pas vraiment à ma problématique. J'aimerais donné le travail à 3-4 personnes et seraient crédités les deux premiers. Les autres recevraient une annulation de la tâche (sauf qi les deux premiers ne trouve pas le bon résultat).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 April 2020 à 17:15
Les deux autres seraient jamais crédités pour leurs calculs :??:

Ça va pas beaucoup attirer les crunchers ça... !! :D
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: GuL le 03 April 2020 à 19:33
Salut GuL  :hello:
tu parles de la deadline je suppose. J'ai essayé de trouver un compromis pour que les volontaires ne soient pas découragés par le risque de rendre en retard.
Oui, Damotbe, c'était ça. La deadline est de combien ?
Titre: Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 05 April 2020 à 09:53
Oui, Damotbe, c'était ça. La deadline est de combien ?

de mémoire, j'ai mis 15 jours pour les courtes et 3 mois pour les longues
Titre: Re : Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 05 April 2020 à 09:59
Oui, Damotbe, c'était ça. La deadline est de combien ?

de mémoire, j'ai mis 15 jours pour les courtes et 3 mois pour les longues
Oui j'ai des longues a rendre avant le 4 juillet. 
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 18 April 2020 à 17:26
Je regardais la progression des badges des membres de l'AF sur QuChemPedIA
et j'ai vu que @damotbe (créateur du projet) a déjà atteint les 50M
(https://quchempedia.univ-angers.fr/athome/img/50M.png) 50 M
alors j'ai regardé l'historique du thread : https://forum.boinc-af.org/index.php/topic,7838.msg490470.html#msg490470
et j'ai vu qu'il y a, quand même, encore de la marge !  :coffeetime:
(https://forum.boinc-af.org/index.php?action=dlattach;topic=7838.0;attach=8069;image) 5B
https://forum.boinc-af.org/index.php/topic,7838.msg490551.html#msg490551
 :oki:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 23 April 2020 à 18:29
J'ai attaché le projet sur le serveur dédié Joes (bi-Xeon X5650 - 20 Go RAM - Ubuntu 18.04) :
j'ai des UT t1, t2, t8... qui se chargent mais se terminent rapidement (elles sont en attente de validation mais je pense qu'elles sont invalides)
Citer
Stderr output
<core_client_version>7.14.2</core_client_version>
<![CDATA[
<stderr_txt>
11:18:14 (17779): wrapper (7.5.26014): starting
11:18:14 (17779): wrapper: running worker.sh ()
Jobs starts with 2 cores
STEP OPT : Starting
Create output archive
OPT.out
Normal termination.
11:18:17 (17779): worker.sh exited; CPU time 1.688720
11:18:17 (17779): called boinc_finish(0)

</stderr_txt>
]]>

quoique c'est différent des UT invalides
Citer
Stderr output
<core_client_version>7.14.2</core_client_version>
<![CDATA[
<stderr_txt>
11:17:41 (17417): wrapper (7.5.26014): starting
11:17:41 (17417): wrapper: running worker.sh ()
Jobs starts with 1 cores
OPT
Create output archive
*** WARNING : deprecated key derivation used.
Using -iter or -pbkdf2 would be better.
OPT.out
Normal termination.
11:17:44 (17417): worker.sh exited; CPU time 1.777874
11:17:44 (17417): called boinc_finish(0)

</stderr_txt>
]]>

Toutes UT sur le serveur : https://quchempedia.univ-angers.fr/athome/results.php?hostid=2008&offset=0&show_names=0&state=0&appid=
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] Dudumomo le 27 April 2020 à 04:37
Salut, ne pas oublier de cocher la case dans les perferences du projet, pour l'export de vos stats.

Je viens de voir que je ne l'avais pas fait

Bon crunch a tous!
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] Dudumomo le 28 April 2020 à 18:08
Salut,
Je viens de poster sur le forum du site
https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=93#824

J'ai plein d'erreurs, et notamment sur des unites longues (certaines sont a plus de 3 jours de crunch). J'espere que ca aide quand meme.

J'ai l'impression que ca ne vient pas de moi cependant.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 29 April 2020 à 09:38
Plusieurs problèmes.

J'ai peut-être oublié des possibilités, mais rien d'inquiétant je pense. On sait qu'on a beaucoup d'invalides et c'est pour ça qu'on crédite de façon généreuse.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] Dudumomo le 29 April 2020 à 10:55
Okay damotbe, tres clair, merci.
Je laisse tourner
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 29 April 2020 à 11:03
Merci @damotbe pour ces explications !  :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 01 May 2020 à 18:47
Pour le point 2, je sais que les gens de Six Track ont beaucoup bossé sur le thème de la reproductibilité numérique cross platforme (Windows, Linux, CPU x86, SSE, SSE3, ... dans toutes les combos) pour être sur d'avoir des résultats identiques bit à bit quelle que soit ce sur quoi ça a été calculé.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 18 July 2020 à 13:34
Scientific publication and new WUs
https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=105&postid=945 (https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=105&postid=945)
Citer
Dear crunchers.

First of all, thank you very much for your help and for your interest in our research.

We are proud to announce the imminent publication of our work on the generation of molecules with AI. You can already read the first draft here : https://www.researchsquare.com/article/rs-36676/v1. It's a raw version with almost no formatting. We have a more polished version that should come out in few weeks. The article will be in open access, the molecule generator in open source and the data in open data. Open Science!

Our exploration of chemical space continues and we have just generated more than 2.5 million small molecules. I know that some people are waiting eagerly for the return of the short WU and here they are! As before, many calculations will be considered invalid because of unstable molecules, but this is the price for unbiased cartography of the chemical space. The first results are very encouraging and we hope that these 2.5 million new molecules will help to provide extremely useful tools for many chemists.

Sincerly
Benoit
Citer
Chers croqueurs.

Tout d'abord, merci beaucoup pour votre aide et pour l'intérêt que vous portez à nos recherches.

Nous sommes fiers d'annoncer la publication imminente de nos travaux sur la génération de molécules avec l'IA. Vous pouvez déjà lire le premier projet ici : https://www.researchsquare.com/article/rs-36676/v1. C'est une version brute avec presque aucun formatage. Nous avons une version plus élaborée qui devrait sortir dans quelques semaines. L'article sera en accès libre, le générateur de molécules en open source et les données en open data. La science ouverte !

Notre exploration de l'espace chimique se poursuit et nous venons de générer plus de 2,5 millions de petites molécules. Je sais que certains attendent avec impatience le retour de la courte WU et les voilà ! Comme auparavant, de nombreux calculs seront considérés comme non valables en raison de l'instabilité des molécules, mais c'est le prix à payer pour une cartographie impartiale de l'espace chimique. Les premiers résultats sont très encourageants et nous espérons que ces 2,5 millions de nouvelles molécules contribueront à fournir des outils extrêmement utiles à de nombreux chimistes.

Cordialement
Benoit

Traduit avec www.DeepL.com/Translator (version gratuite)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 19 July 2020 à 20:26
:+1:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 26 July 2020 à 07:54
NWChem vs NWCHem Long
https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=104&postid=944 (https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=104&postid=944)
Citer
Le NWChem est pour les petites molécules (9 atomes lourds). La plupart d'entre elles sont générées par une méthode d'IA et le but est d'explorer les limites de la chimie. les objectifs de la méthode d'IA sont une combinaison de diversité et de similitude avec des ensembles de données connus. elle implique la génération de molécules instables, donc un certain nombre de résultats non valides. Ces résultats non valides sont très utiles pour construire une autre méthode d'IA capable de générer des molécules stables plus grandes.

La méthode NWChem est longue pour les grosses molécules et plus orientée vers le criblage à haut débit (HTS). Actuellement, nous simulons des molécules pour des applications dans le domaine de l'énergie (photovoltaïque) et de la médecine (photothérapie). Les calculs sont très longs et la stabilité est également une préoccupation.

Traduit avec www.DeepL.com/Translator (version gratuite)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 26 July 2020 à 22:50
J'ai relancé des WU sur un windows. Au bout de 2min40, le client boinc signale qu'il a perdu le contact avec la VM. J'ai abandonné.
Je tente sous linux.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 27 July 2020 à 00:46
Petite précision, c'était un peu tiré par les cheveux, genre inception, avec une WU QuChemPedIA dans une virtualbox, sur un windows 10, sur un serveur XCP (Xen).
Avec une WU QuChemPedIA sur une VM linux dans une virtualbox dans un windows 10, ça fonctionne.
Avec une WU QuChemPedIA sur une VM linux dans un XCP (Xen), ça fonctionne bien aussi.
Heureusement que les WU sous linux ne nécessitent pas virtualbox parce qu'on ne peut pas l'installer dans une VM linux sur un XCP (Xen)  :pt1cable:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 27 July 2020 à 21:42
Bravo à damotbe pour tout ce travail et ces publications !!!  :jap: :jap: :jap:

Ça me motive à essayer de relancer ces UTs sur mes machines à la place du WCG, j'ai mis le Ryzen 1400 depuis aujourd'hui et je vais essayer de mettre les 24 threads du server Joe's sur les NWChem !

Longue vie à ce projet et à ses avancées dans la chimie !

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 29 July 2020 à 11:21
J'ai une tâche longue qui est active depuis 2 jours et 10h, je la tue ?

Je suis le 3ème calculateur et les 2 premiers ont mis 3 jours pour aboutir à une validation peu concluante: je laisse donc tourner.

 :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 29 July 2020 à 14:16
On est bien d'accord que sous linux ça nécessite pas VirtualBox n'est-ce pas ?

Je bascule le Joe dessus, ça fait longtemps que j'ai pas QCPIAisé.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 29 July 2020 à 14:32
Oui application native sous Linux mais attention à la consommation de RAM, j'ai l'impression que chaque tâche réserve 1.2Go même si elle n'utilise pas tant -> à fouiller dans WUProp.

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 30 July 2020 à 00:30
Ca marche bien ! là il a une

1 long (t8)
+ 3 long (t4)
+ 4 normales (t1)
= 24t

J'ai envie de dire : pourquoi pas :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 02 August 2020 à 12:15
J'ai enfin réussi à calculer des WUs pour ce projet.
Cela semble très bien marcher sous Linux.
Par contre, chez-moi, ça ralentit fortement les calculs GPU !
Je vais terminer mes WUs téléchargées et ensuite, j'attendrai ma nouvelle machine beaucoup plus puissante en CPU pour reprendre ce projet beaucoup plus intensément.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 03 August 2020 à 08:32
Plop

Ça foire sur mon i7 2600K (http://www.cpu-world.com/CPUs/Core_i7/Intel-Core%20i7-2600K%20CM8062300833908.html)@W10 ; BOINC 7.16.6 sous BSF  :

360 QuChemPedIA@home 03/08/2020 00:25:35 Starting task BTXv2_athome_b3lyp-321gd_long,batch08,000002920,nwchem_long,1582659874_7
361 QuChemPedIA@home 03/08/2020 00:25:35 Starting task BTXv2_athome_b3lyp-321gd_long,batch06,000003675,nwchem_long,1587026414_3
362 QuChemPedIA@home 03/08/2020 00:25:35 Starting task BTXv2_athome_b3lyp-321gd_long,batch06,000004253,nwchem_long,1587026396_3
363 QuChemPedIA@home 03/08/2020 00:25:35 Starting task cl9_athome_b3lyp-321gd,batch010,000109311,nwchem,1594991980_0
364 03/08/2020 00:25:36 Vbox app stderr indicates CPU VM extensions disabled
365 QuChemPedIA@home 03/08/2020 00:25:36 Computation for task cl9_athome_b3lyp-321gd,batch010,000101078,nwchem,1594991978_1 finished
366 QuChemPedIA@home 03/08/2020 00:25:36 Output file cl9_athome_b3lyp-321gd,batch010,000101078,nwchem,1594991978_1_r980809347_0 for task cl9_athome_b3lyp-321gd,batch010,000101078,nwchem,1594991978_1 absent
367 QuChemPedIA@home 03/08/2020 00:25:36 Output file cl9_athome_b3lyp-321gd,batch010,000101078,nwchem,1594991978_1_r980809347_1 for task cl9_athome_b3lyp-321gd,batch010,000101078,nwchem,1594991978_1 absent
368 QuChemPedIA@home 03/08/2020 00:25:41 work fetch suspended by user
369 03/08/2020 00:25:44 Vbox app stderr indicates CPU VM extensions disabled
370 03/08/2020 00:25:44 Vbox app stderr indicates CPU VM extensions disabled
371 03/08/2020 00:25:44 Vbox app stderr indicates CPU VM extensions disabled
372 03/08/2020 00:25:44 Vbox app stderr indicates CPU VM extensions disabled

J'ai checké au niveau du BIOS, les options de Virtu sont bien activées. J4ai même réinstallé BOINC avec VB (+BSF), même résultat.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 03 August 2020 à 09:19
Il me semble que les extensions VM n'ont rien à voir avec le bios. C'est un truc à installer en plus/avec VB. Je le vois toujours à part dans la liste des mises à jour.
Si ça peut aider.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 03 August 2020 à 09:58
J'ai rajouté les extensions, mais ça foire toujours. On dirait qu'il attribue un chemin foireux au niveau de VBox :

Runtime error opening 'C:\BOINCDATA\slots\13\boinc_ff6575ffda7b1fe4\boinc_ff6575ffda7b1fe4.vbox' for reading: -103 (Path not found.).
F:\tinderbox\win-6.1\src\VBox\Main\src-server\MachineImpl.cpp[754] (long __cdecl Machine::i_registeredInit(void)).
Code d'erreur :
E_FAIL (0x80004005)
Composant :
MachineWrap
Interface :
IMachine {85632c68-b5bb-4316-a900-5eb28d3413df}

"F:\tinderbox" ? Je n'ai pas de lecteur F.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: cougarpelardou le 03 August 2020 à 10:35
Tinder   Tiens tiens ...  :D Pour des rendez vous de recrutement pour l'AF je n'en doute pas  :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 03 August 2020 à 13:45
Les extensions VT-x sont activées (voir avec CPUZ ou dans le BIOS) ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 03 August 2020 à 15:19
J'avais envie de te répondre oui, mais comme je suis consciencieux j'ai ouvert CPU-Z et VT-x n'apparait pas :??:

Je vais aller fouiner dans le BIOS, j'espère que ce n'est pas une option à la con qui désactive ça <__<

(parce que oui, dans le BIOS j'ai bien "Option de virtualisation" à Enabled).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 03 August 2020 à 15:37
N'est-ce pas l'hyperthreading (HT) qui doit être activé dans le BIOS ?

Le CPU est-il compatible HT ?
Dans le détail de l'ordinateur concerné, sur le site QuChemPedIA,
en face de "virtualisation", y a-t-il affiché "Virtualbox (X.X.XX) installé, le processeur est compatible avec la virtualisation matérielle et est activé"
(comme celui-ci (https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=2008))  ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 03 August 2020 à 15:42
Bien vu pour le profil Qchempedia, mais du coup pourquoi j'ai ça :

https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=2752
Virtualbox (6.0.14) installé, le processeur est incompatible avec la virtualisation matérielle
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 03 August 2020 à 15:51
Parce que ton CPU est incompatible avec la virtualisation !  :/
Donc ça ne peut pas fonctionner avec ce CPU !

Quand le CPU est compatible et que l'HT n'est pas activé, ça le précise "le processeur est compatible mais la virtualisation n'est pas activée".
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 03 August 2020 à 16:18
Wut ? Hyperthreading != Virtualisation, ça n'a absolument rien à voir. (confer par exemple l'i5 2500K (http://www.cpu-world.com/CPUs/Core_i5/Intel-Core%20i5-2500K%20CM8062300833803.html) qui n'a pas d'HT mais qui a VT-X).

Btw Windows m'indique que la Virtu est activée, et je suis en train de réinstaller une VM sur Virtualbox pour faire un test empirique.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 03 August 2020 à 16:44
Wut ? Hyperthreading != Virtualisation, ça n'a absolument rien à voir.

Oui, autant pour moi !  :desole:
L'HT, c'est pour le nombre de threads (selon les CPU cores) alors que c'est bien le VT-x dans le BIOS, pour la virtualisation !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 03 August 2020 à 16:45
boinc+vbox est ultra-capricieux avec certains utilisateurs (et j'en suis). Sous Windows 10, il me semble qu'il y a un hyperviseur par défaut qui fait foirer l'accélération matérielle de vbox... sur le forum du projet un utilisateur a fait un tuto (cf. https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=44 (https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=44))

Pour ma part, j'ai installé un VM LinuxMint et je tourne boinc dedans et ça marche nickel !  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 03 August 2020 à 17:03
J'étais pas revenu sur le site de l'univ depuis la fin de mes études, ça ne m'avait pas manqué :o

Je vais décocher HyperV, mais c'est dommage, c'est nettement plus performant que Virtualbox dans mes souvenirs :/

Et puis hey, ho, je ne vais pas faire tourner une VM juste pour ton projet, t'as qu'à coder correctement :o :o :o


Edith : C'est pété quand même en décochant les HyperV :o
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Xe120 le 03 August 2020 à 20:16
T'as tenté la bidouille pour repasser la balise p_vm_extensions_disabled à 0 ?
https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=20&postid=156#156 (https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=20&postid=156#156)

J'avais déjà eu ça avec LHC de mémoire.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 August 2020 à 21:01
Et puis hey, ho, je ne vais pas faire tourner une VM juste pour ton projet, t'as qu'à coder correctement :o :o :o
C'est pas lui, c'est le stagiaire :siflotte:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 04 August 2020 à 00:07
T'as tenté la bidouille pour repasser la balise p_vm_extensions_disabled à 0 ?
https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=20&postid=156#156 (https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=20&postid=156#156)

J'avais déjà eu ça avec LHC de mémoire.

Testé à l'instant : c'est toujours cassé :o

2456 04/08/2020 00:04:38 Vbox app stderr indicates CPU VM extensions disabled
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 04 August 2020 à 09:03
Et puis hey, ho, je ne vais pas faire tourner une VM juste pour ton projet, t'as qu'à coder correctement :o :o :o
C'est pas lui, c'est le stagiaire :siflotte:

Pour ce problème, ça ne dépend ni de moi ni du stagiaire mais du wrapper officiel...  :priz2tet:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 04 August 2020 à 14:29
Et après on se demande pourquoi je suis contre les VM ... :siflotte:

C'est quoi le CPU qui pose problème ? Il ne supporte peut être pas la virtualisation ...
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 04 August 2020 à 15:08
Et après on se demande pourquoi je suis contre les VM ... :siflotte:

C'est quoi le CPU qui pose problème ? Il ne supporte peut être pas la virtualisation ...
C'est peut être pas les VM le problème.  :o
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 04 August 2020 à 15:23
Si je ne dis pas de bêtises, j'ai lu que les proc de la générations core i5 et i7 2X00k avait des "problèmes" de virtualisation. En gros, il y a les instructions VT-x mais pas VT-d sur les versions K. Dit autrement, ça marche avec un core i7 2600, mais pas un core i7 2600K... J'ai un core i5 3570K et c'est pareil toujours plein de problème avec les projets VM :(
Je pensais en achetant une version K avoir une version meilleure, mais c'est pas aussi simple que çà...

EDIT : j'ai oublié de préciser qu'il me semble qu'il faille VT-d pour les VM
EDIT 2 : et donc le meilleur moyen de faire tourner QuChemPedia@home dans ce cas est une VM installée soi-même (comme sur mon core i5-3750k)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 04 August 2020 à 15:28
Han méway, y a le VT-d sur le 2600 vanille mais pas sur le K, cette arnaque :o
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 04 August 2020 à 15:31
Han méway, y a le VT-d sur le 2600 vanille mais pas sur le K, cette arnaque :o

Proco de gamer  :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 04 August 2020 à 15:42
La blague Intel !!!! Je suis sur le c** !!  :blbl:

Mon 3770T possède bien les deux mais pas le 3770K... la méchante segmentation de gamme... -> go RYZEN !!!  :D

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 04 August 2020 à 22:36
Par contre mon 4130T n'a apparemment pas VT-d (juste VT-x) mais il semble correctement cruncher les UT (sous Linux).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 05 August 2020 à 11:44
C'est normal, il n'y a pas besoin de virtualisation sous Linux ... :siflotte:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 05 August 2020 à 12:14
C'est normal, il n'y a pas besoin de virtualisation sous Linux ... :siflotte:

 :plusun:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 05 August 2020 à 12:32
Ah :o

Feignasse de dev', faut faire une appli qui tourne nativement sous Windows :o
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 05 August 2020 à 13:06
Il est parti le stagiaire ! plus de dev :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 05 August 2020 à 14:21
Ah :o

Feignasse de dev', faut faire une appli qui tourne nativement sous Windows :o
Allez, tonton, au boulot (https://www.smilies.4-user.de/include/Brutal/smilie_b_005.gif) (https://www.smilies.4-user.de)
:D

:marcp:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 18 August 2020 à 12:31
Projet injoignable aujourd'hui
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 19 August 2020 à 09:33
coupure électrique annuelle pour vérification... vivement le datacenter  :siflotte: en espérant que l'uptime soit meilleure
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 19 August 2020 à 09:41
Bon courage pour tout faire remonter !  :jap:

 :hello:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 19 August 2020 à 09:50
Bon courage pour tout faire remonter !  :jap:

 :hello:

j'attends toujours le retour de l'électricité  :hyperbon:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 20 August 2020 à 09:18
We are back  :gun:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 20 August 2020 à 09:35
BANZAII !!!
:yaya:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] Dudumomo le 30 August 2020 à 03:49
Le serveur est tombé?

Tu as besoin d'infra? Je peux peut etre aider.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 31 August 2020 à 09:23
Le serveur est tombé?

Tu as besoin d'infra? Je peux peut etre aider.

Toute les nuits, le serveur se stoppe pour une sauvegarde. J'ai essayé les sauvegardes à chaud, mais les disques étaient trop sollicités.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 31 August 2020 à 11:23
Je voulais m'excuser auprès de damotbe : la machine que j'avais consacré à QuChemPedIA avait des barrettes défectueuses, ce qui a probablement entraîné les nombreuses erreurs de calculs suivantes : https://quchempedia.univ-angers.fr/athome/results.php?userid=3&offset=0&show_names=0&state=6&appid=

J'ai mis un peu de temps à réagir, les barrettes neuves sont installées, je reprends les calculs, je vais surveiller les résultats.

 :hello:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 31 August 2020 à 13:40
Je voulais m'excuser auprès de damotbe : la machine que j'avais consacré à QuChemPedIA avait des barrettes défectueuses, ce qui a probablement entraîné les nombreuses erreurs de calculs suivantes : https://quchempedia.univ-angers.fr/athome/results.php?userid=3&offset=0&show_names=0&state=6&appid=

J'ai mis un peu de temps à réagir, les barrettes neuves sont installées, je reprends les calculs, je vais surveiller les résultats.

 :hello:

 :hello:
Ce sont des choses qui arrivent... et c'est prévu pour !
Merci de ton aide et pour tes contributions (une machine dédiée au projet quand même !)
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] Dudumomo le 31 August 2020 à 15:14
Le serveur est tombé?

Tu as besoin d'infra? Je peux peut etre aider.

Toute les nuits, le serveur se stoppe pour une sauvegarde. J'ai essayé les sauvegardes à chaud, mais les disques étaient trop sollicités.

Ah d'accord, j'imagine avec le decalage horaire, je tombe souvent pendant cette sauvegarde. Pas de pb.
Si tu as besoin d'aide sur l'infra, n'hesite pas. (backup, split des serveurs, etc... j'ai de l'espace libre)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 31 August 2020 à 15:43
Merci de ton aide et pour tes contributions (une machine dédiée au projet quand même !)

C'est n'est qu'un Ryzen 5 1400, 4c/8t...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 03 September 2020 à 23:46
:hello:

J'ai eu un petit souci avec le dernier lot de tâches courtes... Je remets ici des messages que j'ai postés dans une section restreinte.
***
Sinon, j'ai trouvé la cause de mes freeze et redémarrages intempestifs sur Linux: QuChemPedIA
Commençons par le début. Mardi après avoir fini mon taf payant, j'ai fermé la VM et mis le Boinc sous Linux à 6 coeurs (soit les coeurs physiques de mon i7 8700K).
Hier matin, vu le trou dans les stats et comme le portable n'arrivait pas à se connecter à Anydesk, je suis descendue voir: j'étais sur le login Linux. Du coup, j'ai passé Boinc à 3 coeurs. Ça avait l'air de pas trop mal tourner, mais dans l'aprèm j'ai encore vu la LED du DD allumée fixe et y avait un lag terrible à l'écran (genre souris qui ne bouge pas ou par bonds au bout de 2-3 minutes) et les tâches en étaient au même point que le matin, sauf WUprop qui affichait un royal 98.x% au bout de 3h et qq :pt1cable: J'ai donc laissé l'ordi se débrouiller tout seul.
Ce matin, je voulais ouvrir Thunderbird sur le PC, re login Linux :heink: J'ai donc passé Boinc à 2 coeurs. J'ai réussi à faire ce que je voulais faire et le PC fonctionne normalement (vu que c'est depuis lui que je vous écris), mais je vous laisse admirer la charge en PJ :D

J'ai la flemme de faire un fichier app_config (en plus je ne suis pas sûre que Linux me laisse trifouiller les dossiers de boinc, j'ai même pas réussi à copier-coller un xml déjà tout prêt sous prétexte que j'avais pas les droits d'accès), alors je vais rester sur 2 coeurs et à bosser (le peu que j'ai) sur le portable. Au moins le temps que QuChem ait fini ses tâches.

***
Finalement, avec une tâche unique ça passe. J'étais sur l'ordi taleur, il a presque tout éclusé, mais 13 Mo de RAM pour une seule tâche quand même :eek: :eek: Il n'y a que Boinc qui tourne actuellement, ya encore eu un plantage en fin de matinée (peu de temps après que j'ai posté je pense). J'ai mis QuChem en pas de nouveau travail.


Edith dit: il s'agit de l'ordinateur n° 7: https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=7
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] Dudumomo le 04 September 2020 à 02:42
13Go c'est enorme! Je comprends pourquoi ton PC etait lent et a fait du swap.
Normalement ca prend 200 a 350mo en gros:
http://wuprop.boinc-af.org/results/ram.py?plateforme=lin&tri=projet&sort=asc

Tu peux t'assurer que ca vient de l'unite?
Dans le terminal, si tu lance la commande "top", tu devrais voir la ram que l'unite prend.

Je me dis que BOINC a peut etre suspendu les unites mais elles sont encore en ram?

Si tu veux le detail, tu peux aussi lancer la commande:
ps aux --sort -rss | head -n10

Ca va te donner le top 10 des applications/scripts,... qui prennent le plus de ram.

Bon crunch!
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 04 September 2020 à 08:10
Quand j'ai vu les 13Go de RAM, seul Boinc tournait sur l'ordinateur (redémarrage peu de temps avant) et j'avais limité à un seul coeur. Donc ça ne pouvait être que ça. D'ailleurs, j'ai consulté quelques tâches sur mon compte hier, et elles affichent bien 13 Go de RAM en pointe et 13-15 Go de swap.
Exemples:
https://quchempedia.univ-angers.fr/athome/result.php?resultid=2669978 (erreur)
https://quchempedia.univ-angers.fr/athome/result.php?resultid=2669996 (invalide)
Dans le pending et les valides j'en ai quelques-unes qui sont montées jusqu'à 6 Go. Toutes celles à 13 Go et + sont parties en erreur pour dépassement de  la limite de mémoire (EXIT_MEM_LIMIT_EXCEEDED)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 04 September 2020 à 14:33
6 x 13 Go ça commence à faire beaucoup...
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 04 September 2020 à 17:05
6 x 13 Go ça commence à faire beaucoup...
Oui 78.  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 04 September 2020 à 18:56
Quand on n'en a que 16, c'est un peu juste :lol:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maeda le 04 September 2020 à 21:20
Pire que Rosetta :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 04 September 2020 à 21:43
OMG... encore un bug chelou  :priz2tet: :priz2tet: :priz2tet:

si je regarde pour la même unité :
https://quchempedia.univ-angers.fr/athome/result.php?resultid=2669977 (https://quchempedia.univ-angers.fr/athome/result.php?resultid=2669977)
sur l'autre machine, Linux aussi, c'est beaucoup plus raisonnable

pour l'autre unité, c'est un Windows en face :
https://quchempedia.univ-angers.fr/athome/result.php?resultid=2669995 (https://quchempedia.univ-angers.fr/athome/result.php?resultid=2669995)

comme l'appli tourne grâce à des scripts bash, tu as des alias ou autres trucs qui pourraient changer le comportement normal ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 05 September 2020 à 10:02
Désolée, damotbe, mais avec "scripts bash" tu me parles chinois :desole:
Comme je disais, quand j'ai observé les 13 Go, il n'y avait que Boinc qui tournait sur l'ordi (il venait de redémarrer) et Skype en arrière-plan, mais sans discussion ouverte ou en cours
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 06 September 2020 à 09:56
ça me rassure presque que ça ne te parle pas  :lol:
Et pour toutes les tâches c'est pareil ou c'est aléatoire ?

Désolée, damotbe, mais avec "scripts bash" tu me parles chinois :desole:
Comme je disais, quand j'ai observé les 13 Go, il n'y avait que Boinc qui tournait sur l'ordi (il venait de redémarrer) et Skype en arrière-plan, mais sans discussion ouverte ou en cours
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 06 September 2020 à 11:06
Bah c'est un bête script .bash (ou.sh) non ?

=> https://fr.wikipedia.org/wiki/Bourne-Again_shell
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 06 September 2020 à 19:13
Bête... tout est (toujours) relatif :)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 06 September 2020 à 19:39
Bah c'est un bête script .bash (ou.sh) non ?

=> https://fr.wikipedia.org/wiki/Bourne-Again_shell

En gros, l'application est un script .sh qui orchestre NWChem (logiciel de chimie) et quelques processus pour la partie Boinc.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 06 September 2020 à 21:05
ça me rassure presque que ça ne te parle pas  :lol:
Et pour toutes les tâches c'est pareil ou c'est aléatoire ?

En fait, si tu regardes les résultats, c'était très aléatoire. Sur les 88 tâches NWChem normales, 13 sont parties en erreur (https://quchempedia.univ-angers.fr/athome/results.php?hostid=7&offset=0&show_names=0&state=6&appid=2), toutes pour dépassement de mémoire.
Dans les invalides (https://quchempedia.univ-angers.fr/athome/results.php?hostid=7&offset=0&show_names=0&state=5&appid=2) (à partir du 1er septembre) ya du 6 Go, 10 Go et aussi du 13 Go de RAM.
Dans le pending (https://quchempedia.univ-angers.fr/athome/results.php?hostid=7&offset=0&show_names=0&state=2&appid=2), il y en a 2 sur 3 à 7 Go et plus.

Je n'ai pas tout regardé en détail. Il m'en reste encore sur l'ordi, mais avec les coupures de courant du WE il est resté éteint et je dois d'abord remplacer la batterie de mon onduleur avant de le remettre en route (ce sera pour demain après le taf).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes>Jip] Elgrande71 le 09 September 2020 à 11:55
Je viens de calculer quelques unités de ce projet prometteur et no problemo .  :sun:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 09 September 2020 à 18:23
Prometteur depuis avril 2018 quand même :D

Mais je suis d'accord, les promesses ne dépendent pas uniquement de l'âge :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 13 September 2020 à 16:33
:hello:

J'ai encore dû choper du lourd (toujours le même lot je crois, je les avais suspendues à cause de Thor, et relâchées vendredi soir).
Cette fois j'ai réussi à faire apparaître tous les processus dans le moniteur (et j'ai vu les bash :D ) et je vous ai fait une capture.

Pour résumer: pendant le weekend je laisse tourner Boinc à 100%, soit 12 threads. Ce matin j'ai aperçu une QuChem "en attente de mémoire", donc je suis repassée à 50%, soit 6 threads. Et ya un peu moins de 2h, il n'y avait plus que 2 tâches en cours, les 4 autres "en attente de mémoire". Le temps que je trouve les bons réglages pour le moniteur de ressources, il n'y en avait plus qu'une en cours.
https://www.dropbox.com/s/v68ewy8stohn7w0/capture%20du%202020-09-13%2014-42-36.png?dl=0
Quelle gourmande ! :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 13 September 2020 à 17:28
Ah wé, 13 Go, dodue !!

(https://images-na.ssl-images-amazon.com/images/I/41U4UzGnW4L._SX258_BO1,204,203,200_.jpg)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 14 September 2020 à 09:50
C'est vraiment unique et étrange... Tu as essayé de remettre le projet à zéro ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 14 September 2020 à 10:06
Je le ferai quand il aura tout renvoyé ;)
Actuellement, ya 4 tâches sur 6 en cours, les deux autres en attente de mémoire.
J'ai remarqué que toutes celles qui utilisaient plus de 13 Go de mémoire partaient en erreur. Vu le stderr, je dirais que si j'avais plus de mémoire sur l'ordi, elles pourraient passer. Je pense que c'est parce qu'elles dépassent le max autorisé pour Boinc (90% quand l'ordi n'est pas utilisé (*)) qu'elles partent en erreur.
Va vraiment falloir que j'investisse dans de la RAM :lol:

(*) Bizarrement, Linux ne détecte que 14.7 Go sur les 16 installés :spamafote:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 14 September 2020 à 10:10
Normalement, NWChem devrait couper à 2Go de mémoire utilisée si je me souviens bien. N'hésite pas à annuler les tâches qui dépassent cette limite, quelque chose ne va pas ! Je dirais qu'au delà de 500Mo ça commence à être louche pour les tâches normales (pas NWChem long)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 14 September 2020 à 10:56
Actuellement, 6 en cours (merci Anydesk :D ) et elles prennent 1x 1.6 Go et 5x 1.7 Go en mémoire, sans compter les bash, mais eux c'est seulement entre 2.0 et 3.6 Mo, donc peanuts :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 14 September 2020 à 12:00
C'est déjà beaucoup je trouve...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 14 September 2020 à 12:10
De celles renvoyées aujourd'hui, une est en pending:
Peak working set size    6,773.90 MB
Peak swap size    7,044.31 MB
:spamafote:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 15 September 2020 à 08:58
De celles renvoyées aujourd'hui, une est en pending:
Peak working set size    6,773.90 MB
Peak swap size    7,044.31 MB
:spamafote:

Là, sur mon fixe j'ai 32 unités (CL9) entre 90Mo et 350Mo  :??:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 15 September 2020 à 23:24
vite fait sur mon pc @home, dans une VB linux, 4 tâches, entre 85 et 200Mo en Ram, entre 1Go et 1.6Go en mémoire virtuelle par tâche.
 
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 18 September 2020 à 14:41
J'ai une intuition que la machine que j'utilise pour faire du QuChemPedIA génère des erreurs car l'utilisation du GPU est configurée pour n'avoir lieu qu'en cas d'inactivité et du coup, il y a une tâche qui s'arrête et repart de nombreuses fois.

Je vais tester ce week-end sans utilisation GPU pour voir.

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 20 September 2020 à 20:36
C'est vraiment unique et étrange... Tu as essayé de remettre le projet à zéro ?
Donc, j'avais fait une réinitialisation du projet une fois qu'il avait tout calculé et renvoyé. Visiblement ça a aidé, même si ya encore des tâches qui montent à +-2Go de RAM. J'ai juste des soucis de "impossible à valider", mais au moins plus d'erreurs.
:jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 22 September 2020 à 16:58
Voyons le verre à moitié plein, c'est mieux !  :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 26 September 2020 à 13:10
J'ai 3 tâches en "Invalide" et 31 en "Validation non concluante".
Vous aussi ?
Je n'avais jamais eu de tels problèmes avant...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 26 September 2020 à 18:02
La plupart des WU QuChemPedIA sont non concluantes, c'est rare d'avoir des 100% bonnes. Elles comptent quand même dans les points boinc rassure toi, c'est normal.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 26 September 2020 à 19:11
OK, vu.
Merci pour les précisions.
C'est pas le nombre de points qui m'inquiète mais plutôt de calculer pour rien !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 27 September 2020 à 11:21
Le Rien est l'Ami du Bien, ici, semble-t-il, et c'est tant mieux :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maeda le 27 September 2020 à 11:28
Depuis quelques jours mon PC figeait aléatoirement. Depuis que j'ai stoppé ce projet, il ne plante plus (à confirmer sur plusieurs jours et en réactivant le projet).

Pas sûr de comment je peux aider au débogage.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 27 September 2020 à 12:01
Ben si ne rien produire, ça aide, alors peut-être qu'en sortir ça aide aussi ??

:warf:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: toTOW le 27 September 2020 à 15:59
Depuis quelques jours mon PC figeait aléatoirement. Depuis que j'ai stoppé ce projet, il ne plante plus (à confirmer sur plusieurs jours et en réactivant le projet).

Pas sûr de comment je peux aider au débogage.
Des fuites mémoire peut être ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maeda le 28 September 2020 à 06:58
Possible. Je referai des tests après le RAID en captant (comme le regretté Shadow) des captures d'utilisation mémoire régulières, ainsi que d'autres paramètres (température, etc.) pour détecter la source du problème.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 28 September 2020 à 08:29
les validations non concluantes et les invalides sont normales pour le projet. Je dirais même plus, ça nous aide grandement ! On explore les limites de la chimie stable et ces données vont nous aider à "cartographier" l'espace chimique moléculaire. On a des résultats très encourageants et c'est grâce à votre aide.
J'aimerais pourvoir aussi donner des points pour les molécules instables mais c'est une des limites de Boinc que je n'arrive pas à dépasser.

Pour les problèmes de machines qui figent ou de consommation mémoire, faites-moi des retours en précisant votre système d'exploitation, l'ID de la machine, les WU, etc. Modesti a eu un problème de mémoire et le reset du projet semble avoir aidé.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 28 September 2020 à 18:18
OK, vu.
Merci damotbe pour ces très importantes précisions.
Pour l'instant, tout roule chez-moi...
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 29 September 2020 à 16:15
OK, vu.

ça fait tellement prof ! je n'ai pas pu m'empêcher de vérifier l'information  :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 29 September 2020 à 17:08
J'aimerais pourvoir aussi donner des points pour les molécules instables mais c'est une des limites de Boinc que je n'arrive pas à dépasser.
Tu as déjà contacté Yoyo de RKN (https://forum.boinc-af.org/index.php?action=profile;u=1756) qui gère - entre autres - le projet RNA? Il devrait pouvoir t'aider je pense.
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 29 September 2020 à 17:50
OK, vu.

ça fait tellement prof ! je n'ai pas pu m'empêcher de vérifier l'information  :siflotte:

Mais il n'y a rien là-dessus sur mon profil, si tu parles bien de ma profession !
Titre: Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 29 September 2020 à 19:30
Mais il n'y a rien là-dessus sur mon profil, si tu parles bien de ma profession !

Google, quand on sait chercher  :siflotte:

https://sgen-cfdt.fr/contenu/uploads/sites/2/2019/06/NOMINATIONS-PAR-COMMUNE-1.pdf (https://sgen-cfdt.fr/contenu/uploads/sites/2/2019/06/NOMINATIONS-PAR-COMMUNE-1.pdf)

EDIT: j'oubliais, il faut aussi faire le tri avec les homonymes  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 29 September 2020 à 20:06
Comme @damotbe ne nous informe pas directement dans ce forum, je traduit le dernier article du forum de QuChemPedIA  :hap:
(est-ce que j'ai bon sur la traduction parce que je n'ai pas tout compris ?  :siflotte: )

https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=122#1107
Citer
Chers Crunchers.

Merci beaucoup pour votre aide.

J'ai le plaisir de vous annoncer la publication de notre dernier article en libre accès décrivant EvoMol, notre générateur de molécules open source.

EvoMol: un algorithme évolutif flexible et interprétable pour la génération moléculaire de novo non biaisée.
L'objectif de ce travail est de concevoir un générateur moléculaire capable d'explorer des zones connues ou inconnues de l'espace chimique.
Notre méthode doit être flexible pour s'adapter à des problèmes très différents. Par conséquent, il doit pouvoir fonctionner avec ou sans l'influence de données et de connaissances antérieures. De plus, quel que soit le succès, il doit être aussi interprétable que possible pour permettre un diagnostic et une amélioration.
Nous proposons ici une nouvelle méthode de génération open source utilisant un algorithme évolutif pour construire séquentiellement des graphes moléculaires. Il est indépendant des données de départ et peut générer des composés totalement invisibles. Pour pouvoir rechercher une grande partie de l'espace chimique, nous définissons un ensemble original de 7 mutations génériques proches du niveau atomique.
Notre méthode réalise d'excellentes performances et même des records sur le QED, le logP pénalisé, le SAscore, le CLscore ainsi que l'ensemble des fonctions orientées objectifs définies dans GuacaMol. Pour démontrer sa flexibilité, nous abordons un objectif très différent issu du domaine des matériaux moléculaires organiques. Nous montrons qu'EvoMol peut générer des ensembles de molécules optimisées ayant HOMO haute énergie ou LUMO basse énergie, à partir uniquement du méthane. Nous pouvons également définir des contraintes sur un score de synthétisabilité et des caractéristiques structurelles. Enfin, l'interprétabilité d'EvoMol permet de visualiser son processus d'exploration sous la forme d'un arbre chimiquement pertinent.

Vous pouvez trouver gratuitement l'article complet:
https://www.researchgate.net/publication/344326849_EvoMol_a_flexible_and_interpretable_evolutionary_algorithm_for_unbeased_de_novo_molecular_generation
ou ici:
https://jcheminf.biomedcentral.com/articles/10.1186/s138321-pour

Vous pouvez nous aider encore un petit peu plus en visitant ces pages pour nous donner de la visibilité et vous pouvez également partager sur les forums de vos équipes et / ou les sites sociaux comme tweeter. (@ b_damota)

Nous travaillons depuis un certain temps sur l'article suivant. Il traitera notamment des calculs que vous aurez effectués depuis le début du projet. Le résultat sera un ensemble de données en libre accès. Pendant que nous écrivons cet article, nous travaillons également sur les parties suivantes. Sans divulguer, je ne peux que vous dire que vos calculs nous aideront à proposer un outil unique et particulièrement utile aux chimistes. Nous vous tiendrons bien sûr informés! Actuellement, deux campagnes sont en cours et ne concernent pas les travaux mentionnés ci-dessus. Les unités "nwchem long" et le nouveau "nwchem" avec des tâches avec le préfixe "CL9" apporteront également de nouveaux résultats pour des articles probablement fin 2021 ou 2022.

Merci
Benoit

Je ne traduirai pas les articles scientifiques liés !  :desole:  :pt1cable:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 29 September 2020 à 21:42
Merci ! Une version un peu corrigée :

Citer
Chers Crunchers.

Merci beaucoup pour votre aide.

J'ai le plaisir d'annoncer la publication de notre dernier article en open access décrivant EvoMol, notre générateur de molécules open source.

EvoMol : un algorithme évolutionnaire flexible et interprétable pour la génération de molécules de novo sans a priori
L'objectif de ce travail est de concevoir un générateur moléculaire capable d'explorer les zones connues et inconnues de l'espace chimique.
Notre méthode doit être flexible pour s'adapter à des problèmes très différents. Elle doit donc être capable de fonctionner avec ou sans l'influence de données et de connaissances préalables. De plus, quel que soit son succès, elle doit être aussi interprétable que possible pour permettre un diagnostic et une amélioration.
Nous proposons ici une nouvelle méthode de génération open source utilisant un algorithme évolutionnaire pour construire séquentiellement des graphes moléculaires. Elle est indépendante des données de départ et peut générer des composés totalement inédits. Pour pouvoir rechercher dans une grande partie de l'espace chimique, nous définissons un ensemble original de 7 mutations génériques proches du niveau atomique.
Notre méthode atteint d'excellentes performances et enregistre même des records sur la QED, le logP pénalisé, le SAscore, le CLscore ainsi que sur l'ensemble des tâches d'optimisation (goal-directed) définies dans GuacaMol. Pour démontrer sa flexibilité, nous nous attaquons à un problème très différent, issu du domaine des matériaux moléculaires organiques. Nous montrons qu'EvoMol peut générer des ensembles de molécules optimisées ayant une haute énergie HOMO ou une basse énergie LUMO, en partant uniquement du méthane. Nous pouvons également fixer des contraintes sur un score de synthétisabilité et des caractéristiques structurelles. Enfin, l'interprétabilité d'EvoMol permet de visualiser son processus d'exploration comme un arbre chimiquement pertinent [/i].

Vous pouvez trouver gratuitement l'article complet :
https://www.researchgate.net/publication/344326849_EvoMol_a_flexible_and_interpretable_evolutionary_algorithm_for_unbiased_de_novo_molecular_generation (https://www.researchgate.net/publication/344326849_EvoMol_a_flexible_and_interpretable_evolutionary_algorithm_for_unbiased_de_novo_molecular_generation)
ou ici :
https://jcheminf.biomedcentral.com/articles/10.1186/s13321-020-00458-z (https://jcheminf.biomedcentral.com/articles/10.1186/s13321-020-00458-z)

Vous pouvez nous aider un peu plus en visitant ces pages pour nous donner de la visibilité et vous pouvez aussi partager sur vos forums d'équipes et/ou réseaux sociaux comme tweeter.(@b_damota)

Nous travaillons depuis un certain temps déjà sur l'article suivant. Il traitera notamment des calculs que vous avez effectués depuis le début du projet. Le résultat sera un ensemble de données en libre accès. Pendant que nous écrivons cet article, nous travaillons également sur les parties suivantes. Sans en dévoiler tout, je peux vous dire que vos calculs nous permettront de proposer un outil unique particulièrement utile aux chimistes.  Nous vous tiendrons bien entendu informés ! Actuellement, deux campagnes sont en cours et ne concernent pas les travaux mentionnés ci-dessus. Les unités "nwchem long" et les nouvelles "nwchem" avec des tâches portant le préfixe "CL9" apporteront également de nouveaux résultats pour des articles probablement fin 2021 ou 2022.

Bordialement,
Benoit
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 29 September 2020 à 21:59
OK, merci !  :jap:

(tweeter = Twitter ?)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 30 September 2020 à 08:44
OK, merci !  :jap:

(tweeter = Twitter ?)

la boulette ! :lol:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maurice Goulois le 06 October 2020 à 01:42
Suis en retard, suis en retard :gno:

Il semble qu'il faut toujours un code  :desole:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 06 October 2020 à 08:07
oui, il est sur la page d'accueil  :lol:

le code : 3VwMu3-eTCg32

facile à retenir en plus  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maurice Goulois le 06 October 2020 à 15:39
 :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 04 November 2020 à 21:07
Je suis désolé mais vu la situation actuelle, je distribue mes machines vers les projets en lien avec le COVID (Rosetta, WCG, etc...) et n'ai plus de ressources à offrir à ton projet.  :/

J'espère pouvoir y revenir bientôt.

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: melektha le 16 December 2020 à 12:36
Je me suis créé un compte hier, j'ai installé VB sur mes trois PC's HP... mais impossible de choper des UT's malgré de nombreuses demandes manuelles.
Faut-il absolument redémarrer le BM, ou lire les fichiers de config et de préférences locales suffit?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 16 December 2020 à 13:37
VirtualBox installé n'est pas la seule condition ; il faut que ton CPU soit compatible avec la virtualisation (réglage BIOS).
Si c'est le cas, quand tu affiches les informations sur l'ordi sur le site du projet BOINC qui nécessite VB (QuChemPedIA ici) :
"Ordinateurs de ce compte" puis "détail" de l'ordi, à la ligne "Virtualisation", tu dois voir quelque-chose comme ça
"Virtualbox (5.2.26) installé, le processeur est compatible avec la virtualisation matérielle et est activé"
https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=26
(sinon ça t'affiche que ce n'est pas activé (BIOS) ou que ton CPU n'est pas compatible
"Virtualbox installé, le processeur est incompatible avec la virtualisation matérielle") 

Après installation de VB, n'oublie pas de redémarrer BM afin qu'il soit pris en compte !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: melektha le 16 December 2020 à 13:58
Bien vu!
Le HT est activé, mais pas la virtualisation!
Au prochain reboot, je règle ça, merki!
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 16 December 2020 à 19:05
C'est que pour windows ou macOS, pour linux le stagiaire avait développé une application native qui n'a pas besoin de VB.

Puis le stagiaire est parti... tristesse... ;)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 17 December 2020 à 11:54
C'est que pour windows ou macOS, pour linux le stagiaire avait développé une application native qui n'a pas besoin de VB.

Puis le stagiaire est parti... tristesse... ;)

Le stagiaire a aussi mis l'application dans les VM pour Windows et macos  :siflotte:
et l'application native commence a bien merder avec les nouvelles versions de Linux sous Ubuntu. Et là encore.... tristesse  :(
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 17 December 2020 à 12:29
Grâce soit rendue au stagiaire ! :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 17 December 2020 à 19:45
Un autre stagiaire ! Un autre stagiaire ! Pétition !!!
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 19 December 2020 à 19:49
Un autre stagiaire ! Un autre stagiaire ! Pétition !!!

Pognon ! pognon !  :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 19 December 2020 à 19:58
Je croyais que les stagiaires étaient des esclaves qui travaillent pour la gloire de leur patron? :siflotte: cocoricooo

:marcp:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 19 December 2020 à 20:13
Je croyais que les stagiaires étaient des esclaves qui travaillent pour la gloire de leur patron? :siflotte: cocoricooo

:marcp:

550€/mois c'est presque ça  :pt1cable:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 19 December 2020 à 20:26
VirtualBox installé n'est pas la seule condition ; il faut que ton CPU soit compatible avec la virtualisation (réglage BIOS).
Si c'est le cas, quand tu affiches les informations sur l'ordi sur le site du projet BOINC qui nécessite VB (QuChemPedIA ici) :
"Ordinateurs de ce compte" puis "détail" de l'ordi, à la ligne "Virtualisation", tu dois voir quelque-chose comme ça
"Virtualbox (5.2.26) installé, le processeur est compatible avec la virtualisation matérielle et est activé"
https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=26
(sinon ça t'affiche que ce n'est pas activé (BIOS) ou que ton CPU n'est pas compatible
"Virtualbox installé, le processeur est incompatible avec la virtualisation matérielle") 

Après installation de VB, n'oublie pas de redémarrer BM afin qu'il soit pris en compte !

Salut Francky82,

j'ai installé Boinc + Virtualbox sur ma nouvelle config mais je n'arrive pas à recevoir des unités de travail. Pourtant je pense avoir tous les prérequis (proc compatible).

Est-ce qu'il autre chose à savoir ? C'est dommage que sur le site du projet il n'y ai pas de procédure. Je tourne en rond  :pt1cable:.

Cordialement,
Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 19 December 2020 à 21:29
As-tu bien suivi mes explications ?
Citer
VirtualBox installé n'est pas la seule condition ; il faut que ton CPU soit compatible avec la virtualisation (réglage BIOS).
Si c'est le cas, quand tu affiches les informations sur l'ordi sur le site du projet BOINC qui nécessite VB (QuChemPedIA ici) :
"Ordinateurs de ce compte" puis "détail" de l'ordi, à la ligne "Virtualisation", tu dois voir quelque-chose comme ça
"Virtualbox (5.2.26) installé, le processeur est compatible avec la virtualisation matérielle et est activé"
https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=26
(sinon ça t'affiche que ce n'est pas activé (BIOS) ou que ton CPU n'est pas compatible
"Virtualbox installé, le processeur est incompatible avec la virtualisation matérielle")
Qu'affiche le détail de ton ordi (d'après mes explications au-dessus) pour la virtualisation ?
(j'ai essayé de trouver ton (tes) ordi(s) sur QuChemPedIA mais ils sont cachés)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 19 December 2020 à 21:37
Voici la machine en question : https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=5434
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 19 December 2020 à 21:48
Ben ça devrait fonctionner (charger des UT - il semble y en avoir (https://quchempedia.univ-angers.fr/athome/server_status.php)) :
"Virtualbox (6.1.12) installé, le processeur est compatible la virtualisation matérielle et est activé"

As-tu effectué des réglages spéciaux : https://quchempedia.univ-angers.fr/athome/prefs.php?subset=project ?
(tâches max - CPu max - éventuellement cocher "applications de test" )
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: melektha le 19 December 2020 à 21:53
Je suis dans le même cas.
Ai redémarré mes 3 HP's après activé la virtualisation dans le BIOS (windows me dit que c'est ok) et la page projet me dit que mes processeurs sont compatibles et sont activés, VirualBox installé.
Mais depuis hier, je chope de UT's SRbase, NFS, etc... mais pas de QuChemPedia.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maurice Goulois le 20 December 2020 à 09:07
Le serveur a l'air un peu "mou" mais je reçois du taf régulièrement.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 21 December 2020 à 14:17
As-tu effectué des réglages spéciaux : https://quchempedia.univ-angers.fr/athome/prefs.php?subset=project ?
(tâches max - CPu max - éventuellement cocher "applications de test" )

Cocher "applications de test" c'était ça la solution ! Je reçoit enfin des unités de travail après avoir forcer BM d'aller en chercher.

Merci Franck82, car tes petites astuces m'ont mit sur la bonne voie.
 :jap:

Cordialement,
Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: melektha le 21 December 2020 à 14:29
Moi aussi  :hello:
A voir si tout se passe bien lors du calcul...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 21 December 2020 à 15:58
Bon allez il est temps : ouverture des vannes pour QCPIA sur le nouvel iMac.

18 tâches en // (ce con veut pas en prendre 20, on verra plus tard), 16 Go de RAM bouffés par boinc, il m'en reste 14 Go libre, 0 Ko de swap.

A suivre :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: melektha le 22 December 2020 à 16:58
Citer
Reporté : VM job unmanageable, restartting later"

Késako? Les quelques informations trouvées parlent de niveaux de priorités des processus BOINC et VirtualBox différents, si j'ai bien compris.
Mais peu de ressources sur ce problème d'après mes recherches.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 22 December 2020 à 17:39
De mon côté depuis hier ca marche nickel. Mes premières tâches ont été validées :

5162496 1998002 5434 21 Dec 2020, 13:09:17 UTC 21 Dec 2020, 20:23:05 UTC Terminé et validé 6,996.98 6,879.16 200.00 NWChem v0.11 (vbox64_t1)
windows_x86_64
5158668 1997531 5434 21 Dec 2020, 13:09:17 UTC 22 Dec 2020, 14:54:06 UTC Terminé et validé 8,107.35 7,936.00 200.00 NWChem v0.11 (vbox64_t1)
windows_x86_64
5714229 1990736 5434 21 Dec 2020, 13:09:17 UTC 21 Dec 2020, 20:23:05 UTC Terminé et validé 6,497.34 6,346.73 200.00 NWChem v0.11 (vbox64_t1)
windows_x86_64
5160525 1997751 5434 21 Dec 2020, 13:09:17 UTC 21 Dec 2020, 16:49:07 UTC Terminé et validé 8,854.68 8,773.31 200.00 NWChem v0.11 (vbox64_t1)
windows_x86_64
5161556 1997868 5434 21 Dec 2020, 13:09:17 UTC 21 Dec 2020, 15:10:13 UTC Terminé et validé 7,093.56 7,004.66 200.00 NWChem v0.11 (vbox64_t1)
windows_x86_64
5160535 1997752 5434 21 Dec 2020, 13:09:17 UTC 21 Dec 2020, 14:31:55 UTC Terminé et validé 4,528.81 4,452.55 200.00 NWChem v0.11 (vbox64_t1)
windows_x86_64
5157753 1997402 5434 21 Dec 2020, 13:09:17 UTC 21 Dec 2020, 19:35:33 UTC Terminé et validé 9,965.82 9,877.39 200.00 NWChem v0.11 (vbox64_t1)
windows_x86_64
5162890 1998061 5434 21 Dec 2020, 13:09:17 UTC 21 Dec 2020, 19:46:45 UTC Terminé et validé 1,885.19 1,788.63 200.00 NWChem v0.11 (vbox64_t1)
windows_x86_64
5160879 1997801 5434 21 Dec 2020, 13:09:17 UTC 21 Dec 2020, 14:59:52 UTC Terminé et validé 6,396.05 6,312.66 200.00 NWChem v0.11 (vbox64_t1)
windows_x86_64
5159119 1997543 5434 21 Dec 2020, 13:09:17 UTC 21 Dec 2020, 18:19:30 UTC Terminé et validé 7,117.08 7,016.02 200.00 NWChem v0.11 (vbox64_t1)
windows_x86_64
5162494 1998001 5434 21 Dec 2020, 13:09:17 UTC 21 Dec 2020, 15:10:13 UTC Terminé et validé 5,805.13 5,719.44 200.00 NWChem v0.11 (vbox64_t1)
windows_x86_64

Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Kao le 03 January 2021 à 21:21
Citer
Reporté : VM job unmanageable, restartting later"

Késako? Les quelques informations trouvées parlent de niveaux de priorités des processus BOINC et VirtualBox différents, si j'ai bien compris.
Mais peu de ressources sur ce problème d'après mes recherches.

Même soucis, quelqu'un a plus d'infos ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 04 January 2021 à 08:28
Citer
Reporté : VM job unmanageable, restartting later"

Késako? Les quelques informations trouvées parlent de niveaux de priorités des processus BOINC et VirtualBox différents, si j'ai bien compris.
Mais peu de ressources sur ce problème d'après mes recherches.

Même soucis, quelqu'un a plus d'infos ?

de ce que j'ai compris, il faut redémarrer. Vraiment pas optimale cette affaire  :priz2tet:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Kao le 04 January 2021 à 10:02
Redémarrer le pc ou boinc ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: melektha le 04 January 2021 à 10:13
De ce que j'ai compris, c'est un problème de priorité des processus.
Le processus de la machine virtuelle ne serait pas lancé avec une priorité suffisante et se retrouve donc sans ressources.

De ce que j'ai observé, les tâches notées "VM job unmanageable, restartting later" redémarrent automatiquement, faut juste attendre.
Ou redémarrer pour BM pour les impatient... quitte à ce que le prob revienne plus tard.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 04 January 2021 à 17:30
Redémarrer le pc ou boinc ?

Le PC je crois...  :cry:
Après, je crunche sous Linux...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 30 March 2021 à 17:26
J'ai 256 valides, 45 non concluantes et 160 invalides : cela me parait beaucoup !
Est-ce que quelqu'un sait ci c'est normal ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maurice Goulois le 31 March 2021 à 10:13
j'ai

État: Tous (41) · En cours (3) · Validation en attente (1) · Validation non concluante (1) · Valide (21) · Invalide (14) · Erreur (1)
Les invalides sont du genre,
<core_client_version>7.16.6</core_client_version>
<![CDATA[
<stderr_txt>
23:58:42 (603797): wrapper (7.5.26014): starting
23:58:42 (603797): wrapper: running worker.sh ()
Jobs starts with 1 cores
STEP OPT : Starting
Create output archive
OPT.out
Normal termination.
03:06:06 (603797): worker.sh exited; CPU time 1.871889
03:06:06 (603797): called boinc_finish(0)

</stderr_txt>
]]>
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 31 March 2021 à 16:28
Il y a de mauvaises séries de molécules avec beaucoup d'instabilités. Ça ne me parait pas anormal en tout cas.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 31 March 2021 à 19:22
OK, vu.
Merci.
De toute façon, j'ai laissé tourner...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 16 April 2021 à 19:43
J'ai des VM job unmanageable qui commencent à s'empiler, et qui continuent d'occuper un slot : sur 19 tâche CPU que j'autorise on voit bien que 15 sont actives et 4 dans cet état :

(https://nsa40.casimages.com/img/2021/04/16/21041607510150144.png)

Il faut faire quoi ? les killer ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 17 April 2021 à 15:32
J'ai arrêté / relancé boinc, maintenant je vois plus les "not manageable" mais j'en ai que 15 / 19 qui tournent, 3 qui sont "waiting to run", et plein qui sont en attente de démarrage, et qui démarrent pas... ah mais j'oubliais que j'avais fait  un app_config pour n'en avoir que 15 qui tournent en même temps, au temps pour moi. Le temps que j'écrive y'en a plus qu'une en waiting, bon il a l'air de gérer son affaire...

En revanche le fait d'avoir relancé boinc a fait qu'il en a téléchargé plein de nouvelles, alors qu'il en avait plus *aucune* en attente, il s'est arrêté à 164.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 07 May 2021 à 18:23
Quchempedia Episode 1 The origins of a research project (English version)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 07 May 2021 à 18:29
Je préfère la version française (je comprends mieux) !  :D

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 07 May 2021 à 19:12
Du coup moi aussi je comprend mieux.  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 07 May 2021 à 19:53
Super la vidéo. Merci pour les explications !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: franky82 le 07 May 2021 à 20:11
Il va falloir suivre sa chaîne Youtube pour la suite des explications !
(au fait, il parle de @damotbe à la fin de la vidéo)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 08 May 2021 à 11:47
Un ptit résumé des 30mn ? nan ? :D

Bon ok ok faudra que je la regarde...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maurice Goulois le 08 May 2021 à 16:22
Wow :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 09 May 2021 à 10:16
Waouh, waouh !
Je suis fan !
Vivement la prochaine vidéo...

 :eek:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 09 May 2021 à 13:00
Ayé j'ai tout vu ! (bon j'avoue : j'ai un peu accéléré dans la partie sur les molécules et les énergies quantiques....) et j'ai même laissé un commentaire !

Vivement la suivante, si je comprends bien ça parlera plus directement du projet en lui même.

Mention spéciale à Damotbe et vive la sérendipité :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 09 May 2021 à 18:10
Je voudrais bien participer à ce projet mais vu ma toute petite config, j'ai peur qu'une VM me pose des soucis.
A votre avis?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 09 May 2021 à 20:04
Le mieux c'est d'essayer :)

Avec une seule tâche pour un début, je sais plus si le projet permet de faire un réglage ou s'il faut passer par un app_config - très facile avec le générateur de app_config de Seb.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 09 May 2021 à 20:58
VB installé, compte créé, rien à faire d'autre?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 10 May 2021 à 08:54
 3 WUs parties en erreur
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 10 May 2021 à 10:43
10/05/2021 10:40:16 | QuChemPedIA@home | Not requesting tasks: don't need (CPU: not highest priority project; NVIDIA GPU: )

C'est à dire?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 10 May 2021 à 10:46
Ben que le projet n'est pas celui de ta liste qui a la plus grande priorité. Peut-être que tu as un/des projets du Pentathlon sur ta bécane et un cache relativement petit, donc pas besoin de charger du nouveau taf QuChem :spamafote:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 10 May 2021 à 10:54
En revanche le lien (site / compte QCPIA) vers une de tes tâches en erreur pourrait être utile (voir le log d'erreur). Ou pas :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 10 May 2021 à 11:43
https://quchempedia.univ-angers.fr/athome/result.php?resultid=7235446 (https://quchempedia.univ-angers.fr/athome/result.php?resultid=7235446)
https://quchempedia.univ-angers.fr/athome/result.php?resultid=7235531 (https://quchempedia.univ-angers.fr/athome/result.php?resultid=7235531)
https://quchempedia.univ-angers.fr/athome/result.php?resultid=7234230 (https://quchempedia.univ-angers.fr/athome/result.php?resultid=7234230)
https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=7388
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 10 May 2021 à 11:51
Elles sont toutes partie en erreurs chez les autres aussi! pas de chance! Il faut persévérer Antares  :jap: :jap: :jap:

https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=2507547
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 10 May 2021 à 14:03
Mais y'en a (https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=2491544), aussi (https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=2506913), qui sont en "validation peu concluante" chez d'autres cruncher de l'UT et en erreur "complète" chez Antares... non pas que ça fasse une grande différence, certes, je pense qu'il faut tenter encore un peu pour voir et sinon abandonner en effet...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Sébastien le 10 May 2021 à 17:32
https://quchempedia.univ-angers.fr/athome/result.php?resultid=7235446 (https://quchempedia.univ-angers.fr/athome/result.php?resultid=7235446)
https://quchempedia.univ-angers.fr/athome/result.php?resultid=7235531 (https://quchempedia.univ-angers.fr/athome/result.php?resultid=7235531)
https://quchempedia.univ-angers.fr/athome/result.php?resultid=7234230 (https://quchempedia.univ-angers.fr/athome/result.php?resultid=7234230)
https://quchempedia.univ-angers.fr/athome/show_host_detail.php?hostid=7388

D'après le message d'erreur, il faut activer VT-x dans le bios.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 10 May 2021 à 19:22
Dans le bios, j'ai bien une ligne qui m'indique que VT-x est supporté (ligne grisée), mais où l'activer?
Bios AM 0902 du 24/03/2014
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Sébastien le 10 May 2021 à 19:52
Quel est le modèle de la carte mère ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 10 May 2021 à 20:48
Asus H81M-E
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Sébastien le 10 May 2021 à 21:38
Menu Advanced > CPU Configuration > Intel Virtualization Technology
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 11 May 2021 à 07:56
J'ai activé "Intel Technologie Virtualization", ce doit être la même chose...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 12 May 2021 à 18:10
Bon apparemment c'est bon.
J’ai ce message sur une VU: 12/05/2021 18:00:06 | QuChemPedIA@home | Task cl9_athome_b3lyp-321gd,batch184,001841585,nwchem,1614258841_9 postponed for 86400 seconds: VM job unmanageable, restarting later.

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 12 May 2021 à 22:11
Ca c'est clairement pas très bon, surtout si t'as une seule tâche à la fois : concrètement la tâche est en pause et ne calcule plus, normalement il est censé en lancer une autre à la place, c'est un "classique" des projets à base de VM "pas super stables" :siflotte:

LHC me le faisait beaucoup à leurs début (1er projet à avoir implémenté des applis VM/VB), ça s'était bien calmé.

Ca dépend d'un mix "OS / machine / config (ressources) / appli (code) / nombre de tâches", mais avec 1 seule tâche... mauvais signe... quand j'ai voulu faire du QCPIA intense avec 10 tâches en // sur mon i9 20 threads il y a pas très longtemps, j'en avais régulièrement / pas mal, sauf que globalement j'en avais plein d'autres qui se calculaient aussi.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 13 May 2021 à 08:59
3 autres même punition...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 13 May 2021 à 11:51
En fait, elles finissent toutes avec le même message!
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 13 May 2021 à 11:54
T'as combien de RAM? Je pense que ça peut coincer de ce côté-là
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 13 May 2021 à 12:53
T'as combien de RAM? Je pense que ça peut coincer de ce côté-là

Oui, moi aussi je pense cela !
J'ai eu ce problème...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 13 May 2021 à 13:07
8 Go, je viens de mettre à jour VB, c'est reparti mais pour combien de temps?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 13 May 2021 à 14:33
8 Go, je viens de mettre à jour VB, c'est reparti mais pour combien de temps?

8 Go OK, mais pour combien de WUs simultanément ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 13 May 2021 à 15:51
Une seule par core
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 13 May 2021 à 16:17
Sorry, j'ai pas vu que t'avais expliqué cela plus haut !
8 Go, ça ne suffit pas pour 10 WUs sur ce projet selon les périodes.
Parfois, ça passe, parfois, ça ne passe pas, c'est ce que j'ai constaté.
Par contre, je n'avais jamais rencontré de problème avec 8 WUs pour 12 Go de RAM, là, ça passait toujours.
Je pense effectivement que ton souci peut venir du manque de RAM.
Y'a d'autres projets comme cela : NFS, Rosetta...
Aujourd'hui, pour être tranquille sur Boinc, il faut 2 Go de ram pour un thread !
Mais peut-être que certains ne seront pas d'accord avec moi !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 13 May 2021 à 17:14

Aujourd'hui, pour être tranquille sur Boinc, il faut 2 Go de ram pour un thread !
Mais peut-être que certains ne seront pas d'accord avec moi !
D'accord 2 Go c'est un minimum.  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 13 May 2021 à 17:51
Le problème est que je n'ai que 2 emplacement ram, et pour trouver des 8go en ddr3 à des prix abordables...
S'il y en a qui en vendent, je suis preneur.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 13 May 2021 à 18:22
Le problème est que je n'ai que 2 emplacement ram, et pour trouver des 8go en ddr3 à des prix abordables...
S'il y en a qui en vendent, je suis preneur.
Sur Leboncoin il y a du choix.
Un exemple : https://www.leboncoin.fr/informatique/1981820087.htm?ac=2404136686 (https://www.leboncoin.fr/informatique/1981820087.htm?ac=2404136686)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 13 May 2021 à 18:29
Mais pourquoi tu limites pas à 4 tâches dans un premier temps pour voir comment ça se comporte ? (avec un autre projet, pas à base de VB et peu consommateur, en parallèle)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 13 May 2021 à 18:36
Franchement, depuis que j'ai appris que ce projet tourne en natif sur Linux, je ne me fait plus chier avec VirtualBox sur Windows.
Et fini les problèmes de "VM job unmanageable, restarting later"

Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 13 May 2021 à 18:42
A une époque il y eut un stagiaire en qui nous eûmes de grands espoirs pour porter une appli native pour windows et mac, comme il l'avait fait sous linux, mais il partit, son stage fini... et n'eut point de successeur...
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 13 May 2021 à 19:03
Mais pourquoi tu limites pas à 4 tâches dans un premier temps pour voir comment ça se comporte ? (avec un autre projet, pas à base de VB et peu consommateur, en parallèle)

Ben oui, ça c'est une riche idée !

Franchement, depuis que j'ai appris que ce projet tourne en natif sur Linux, je ne me fait plus chier avec VirtualBox sur Windows.
Et fini les problèmes de "VM job unmanageable, restarting later"

Kali.

Idem pour moi.
Je n'ai jamais été convaincu par les VB.
Pourtant, j'avais fait plein d'essais de toute sorte.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 17 May 2021 à 20:27
Première tache validée!!! :pt1cable: :bipbip:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 17 May 2021 à 20:29
:yaya:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 17 May 2021 à 20:47
Première tache validée!!! :pt1cable: :bipbip:

Le début d'une grande aventure...

Ca serait bien de reprendre la première place FB2021 sur ce projet francais.

Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 17 May 2021 à 21:08
Première tache validée!!! :pt1cable: :bipbip:

Le début d'une grande aventure...

Ca serait bien de reprendre la première place FB2021 sur ce projet francais.

Kali.

D'habitude, on l'avait car damotbe faisait tourner le serveur de l'Université avec son compte !!! :D
Je finis le marathon du Pentathlon sur Sidock et j'attribuerai un peu de puissance pour faire un fond.

:hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 17 May 2021 à 21:53
Han, ouais, en plus en ce moment je m’intéresse à la chimie, je revoie Breaking Bad  :miam:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 17 May 2021 à 22:22
J'ai remarqué que nos fermiers (damotbe, mike / lille...) ont presque plus aucune production - à part visiblement leur machine perso.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 18 May 2021 à 08:23
La climatisation, toujours la climatisation  :priz2tet:

Première tache validée!!! :pt1cable: :bipbip:

Bravo, super !  :love:
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: f11ksx le 18 May 2021 à 08:48
Première tache validée!!! :pt1cable: :bipbip:

Le début d'une grande aventure...

Ca serait bien de reprendre la première place FB2021 sur ce projet francais.

Kali.

Il manque beaucoup pour reprendre la 1° place?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 18 May 2021 à 09:10
12 miyons...
https://statseb.boinc-af.org/comparatif_FB.py?cat=toutes&type=menacc&nb_jou_dep=&tri=rang
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: f11ksx le 18 May 2021 à 09:59
Merci, douce licorne.
J'attrape mon badge MIP 10 et j'y met un petit coup d'accélérateur.  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 18 May 2021 à 11:40
Je fini mes taches en cours et je m'y mettrait aussi.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: cougarpelardou le 18 May 2021 à 13:30
On peut les doubler au train tranquillou.

Les premiers c'est SETI USA qui sont en décomposition. Leur RAC global n'est plus que de 30 millions à comparer au 110 millions de l'AF

En passant sur Qchem de 26 000 notre RAC aujourd'hui à 80 000 on passe numéro 1 à l'automne.

Et les TaaT qui sont derrière nous en numéro 3 ont 32 000 000 points de retard.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 18 May 2021 à 18:55
Tranquillou, tranquillou...
D'après les deux sites de Seb (celui-ci (https://statseb.boinc-af.org/comparatif_FB.py?cat=toutes&type=menacc&nb_jou_dep=&tri=projet) et celui-là (http://dev.statseb.boinc-af.org/synthese_FB_AF_multi.py#)), il nous faudrait 416 jours pour les dépasser  :siflotte:

Je m'y remets aussi dès la fin du Pentathlon.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 20 May 2021 à 17:34
la climatisation a été remise en route... elle n'a pas tenue la journée  :priz2tet:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 20 May 2021 à 18:36
Quand ça veut pas, ça veut pas... :spamafote:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maeda le 20 May 2021 à 21:27
Ils sont passés où les PC full passifs ? Plus besoin de climatisation :lol:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 24 May 2021 à 10:53
Je crois qu'il y a un souci:

Application
NWChem 0.11 (vbox64_t1)
Nom
cl9_athome_b3lyp-321gd,batch125,001257958,nwchem,1614272113
État
Reporté : VM job unmanageable, restarting later.
Reçu
12/05/2021 17:11:40
Date limite d'envoi
26/05/2021 17:11:39
Taille de tâche estimée
20 000 GFLOPs
Temps de calcul
00:02:00
Temps processeur depuis le point de sauvegarde
00:00:00
Temps écoulé
1d 03:34:01
Temps restant estimé
00:00:00
Portion effectuée
99,999%
Taille de la mémoire virtuelle
49,95 MB
Espace mémoire alloué
2,00 GB
Répertoire
slots/11
ID du process
9912
Taux de progression
3,600% par heure
Exécutable
vboxwrapper_26200_windows_x86_64.exe

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 24 May 2021 à 23:32
Si t'as une seule tâche qui tourne à la fois et qu'elle se retrouve comme ça, ben c'est pas bon en effet... je suppose que dans ce cas il en lance une autre à la place ?  parfois ça se résout tout seul, parfois pas...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 25 May 2021 à 08:09
C'est tout à fait ça, je me retrouve avec 4 taches dans le même situation
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 25 May 2021 à 09:36
Le problème est que cette tâche reste à 99.999% depuis quelques jours
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 25 May 2021 à 10:32
T'embêtes donc pas, liquides là :spamafote:

De mon côté j'ai probablement pas la bonne version de vbox sur Windows, toutes mes UT partent en erreur à la 7ème seconde. => https://quchempedia.univ-angers.fr/athome/result.php?resultid=7281078 (mauvaise détection hardware).

Je vais réinstaller VBox, pour voir.


Edith : Mouais ça ne change rien.

Bon par contre ça roule sous mes crunchbox sous Debian.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 25 May 2021 à 19:29
Je viens de commencer (depuis hier soir) à suivre la reco de Seb que j'avais eu ici y'a quelques temps : faire tourner QCPIA dans une VM linux (version native sans VB) sur 10 threads (donc j'ai réservé la moitié des thread à la VM et réduit l'usage de boinc sur mon host macOS d'autant) et bon of course ça tourne bien mieux que la version macOS / VB.

Pour l'instant
- une seule en erreur (après un long temps de calcul)
- 2 en erreurs après quelques seconds (si ça l'amuse)
- 9 valides (good !)
- 4 en attente de validation, dont 2 très courtes (y'a pas de mal) et 2 longues où les autres crunchers de la tâche sont pour le moment en erreur (je croise les doigts).

J'avais réservé pas mal de RAM pour la VM mais ça sert à rien que la conso est minime par rapport aux tâches VB (of course, again) donc je vais réduire.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 25 May 2021 à 21:13
Une GROSSE question : l'appli linux (non VB), on dirait bien qu'elle a pas de point de reprise... vous confirmez ??


Edit : bon je le vois envoyer des trickle-up message... je suppose que ça veut aussi dire "point de reprise" ?
Et je vois un fichier "wrapper_checkpoint" dans le slot, on va dire que ce faisceau d'indices tend à prouver que oui :)
(mais le stderr.txt du slot est presque vide en revanche, on fait pas ce qu'il fait)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 26 May 2021 à 11:20
Première tache validée!!! :pt1cable: :bipbip:

Le début d'une grande aventure...

Ca serait bien de reprendre la première place FB2021 sur ce projet francais.

Kali.

D'habitude, on l'avait car damotbe faisait tourner le serveur de l'Université avec son compte !!! :D
Je finis le marathon du Pentathlon sur Sidock et j'attribuerai un peu de puissance pour faire un fond.

:hello:

Mes tâches Pentathlon sont terminées depuis hier. J'ai mes mes boosts sur QuChemPedIA.
Objectif : reprendre la première place FB avant la fin de l'année.

Kali.
 :sun:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 26 May 2021 à 16:41
J'essaye de faire tourner une machine sous Ubuntu pour avoir moins de problèmes avec ces ....... de VM :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 26 May 2021 à 20:27
Ca tourne bien, j'en suis à 26 valides / 5 invalides (dont 3 au bout de qques secondes) / 4 en attente.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 26 May 2021 à 21:22
C'est quoi déjà les "validate error"? J'ai pratiquement que ça :/ J'espère que ça fait quand même avancer le projet - moi ça fait avancer les heures WUprop ^^
https://quchempedia.univ-angers.fr/athome/results.php?hostid=7
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 26 May 2021 à 22:30
Valider l'erreur c'est toujours en pending, faut voir comment ça se finit par la suite.

Je pense que damotbe en avait parlé plus haut ici - ptet même que j'avais posé la question :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 27 May 2021 à 20:52
merci pour votre aide. Quelques précisions/réponses

Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 27 May 2021 à 21:00
merci pour votre aide.

C'est avec plaisir Benoit
 :kookoo:

Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 28 May 2021 à 00:50
@damotbe : on sert la science et c'est notre joie :)

Mais bon sur mon Mac rien ne va plus avec VB (hors boinc ou dans boinc...)

Mais ma VM linux (sous parallels desktop) avec 10 QCPIA dedans marche du tonnerre, alors on verra ce que le futur me (nous) réserve...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 01 June 2021 à 07:50
Hello,

De mon côté, impossible d'en faire tourner plus que 3 / crunchbox, sinon problème de communication etc. Sous VM.

Résultats très variables et instables.

Je viens d'en virer 4 qui ne se terminaient pas, dont 3 en route depuis > 40 heures.

Me faut une machine sous Ubuntu, mais pas vraiment le temps d'approfondir le sujet  :desole:

 :hello: :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 01 June 2021 à 08:54
Depuis que j'ai limité à 2 tâches sur mon ordi, j'arrive à avoir des valides, même s'il y a toujours quelques erreurs.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 01 June 2021 à 09:59
La VM linux est vraiment ze solution, consommation mémoire ridicule de la tâche native linux, entre 120 et 150 Mo, en comparaison avec la tâche VM-VB...

En plus contrairement à VirtualBox (faire une VM dédiée sous VB comme j'avais pu faire lors de mes premiers tests, mais VB marche plus maintenant, autre problème...), les processus périphériques de Parallels Desktop (sous mac) ont l'air de consommer beaucoup moins de ressources, presque tout est dédié à la VM, donc moins de pertes de CPU pour mon cher boinc :)

Mes 10 threads dédiés rapportent un beau RAC de 2700 :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Xe120 le 01 June 2021 à 21:18
C’est quoi ton cpu sur ton mac ?
Moi j’ai dédié une machine sous debian, ça tourne nickel
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 02 June 2021 à 17:00
Bon, ben comme mes machines tournent pour rien, j'arrête jusqu'à ce que j'en ai une sous Ubuntu.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 02 June 2021 à 18:45
@Xe120 : tu fais référence à mon problème avec VB (https://forum.boinc-af.org/index.php/topic,3628.msg516713.html#msg516713) ?

Un pro du forum Oracle (après moult échange) a conclu par "trop bizarre"...

Ca marchait super, avant.

Donc pour lancer un VM linux par moi sur le mac, j'utilise Parallels Desktop qui marche impec.

Et pour les projets boinc à base de VM-VB ben ça marche plus du tout...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Xe120 le 02 June 2021 à 20:00
C'était pour comparer, ton RAC me parait faible, j'ai un petit i5 9500T qui me sort 14-15k sur une debian  :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 June 2021 à 00:43
Ben déjà j'alloue que 10 thread. Pis c'est une VM, qui dit VM dit déperdition, c'est forcé.

Mais bon oui en effet l'écart est grand... :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 05 June 2021 à 08:00
 :hello:
Purée, j'en reviens pas.
Réussi à me créer une machine virtuelle Ubuntu (externe), me connecter, accéder aux droits 'root', installer boinc et faire tourner QuChemPedIA.
Trop content :)
J'espère que ça va fonctionner, parce que Ubuntu et moi ...  :gno:
 :hello: :kookoo:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 05 June 2021 à 08:10
:hello:
Purée, j'en reviens pas.
Réussi à me créer une machine virtuelle Ubuntu (externe), me connecter, accéder aux droits 'root', installer boinc et faire tourner QuChemPedIA.
Trop content :)
J'espère que ça va fonctionner, parce que Ubuntu et moi ...  :gno:
 :hello: :kookoo:

Personnellement, c'est ce que je fais et ça marche bien.

Kali.
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 05 June 2021 à 08:14
:hello:
Purée, j'en reviens pas.
Réussi à me créer une machine virtuelle Ubuntu (externe), me connecter, accéder aux droits 'root', installer boinc et faire tourner QuChemPedIA.
Trop content :)
J'espère que ça va fonctionner, parce que Ubuntu et moi ...  :gno:
 :hello: :kookoo:

Personnellement, c'est ce que je fais et ça marche bien.

Kali.
:hello:

Ben tu sais, moi et Ubuntu ... y ai pas touché depuis 7 ou 8 ans, et j'avais été guidé pas à pas par des amis libristes  :miam:

Pour la prochaine machine, combien dois-je prévoir de RAM / UT pour ce projet ?

Ici j'ai pris un peu trop je pense, 64 pour 18 CPU

Merci  :jap:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 05 June 2021 à 08:18
:hello:
Purée, j'en reviens pas.
Réussi à me créer une machine virtuelle Ubuntu (externe), me connecter, accéder aux droits 'root', installer boinc et faire tourner QuChemPedIA.
Trop content :)
J'espère que ça va fonctionner, parce que Ubuntu et moi ...  :gno:
 :hello: :kookoo:
:yaya: :yaya: :yaya:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 05 June 2021 à 08:32
 :hilare:

Bon, ben du coup vais en faire une deuxième.

Comment on fait pour voir l'utilisation de la RAM ?

Merci  :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 05 June 2021 à 08:58
Ma VM Ubunto a 6 cœurs et 3 Go de RAM. Je fait 6 tâches simultanément qui se termine sans erreur.

Kali
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 05 June 2021 à 09:36
:hilare:

Bon, ben du coup vais en faire une deuxième.

Comment on fait pour voir l'utilisation de la RAM ?

Merci  :jap:

Sous linux ? htop (ou top si htop n'est pas installé).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 05 June 2021 à 09:54
j'installe toujours htop sur un serveur ubuntu. C'est utile pour voir le travail de chaque Coeur/Thread et surtout la conso de RAM.

Kali.
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 05 June 2021 à 10:00
:hilare:

Bon, ben du coup vais en faire une deuxième.

Comment on fait pour voir l'utilisation de la RAM ?

Merci  :jap:

Sous linux ? htop (ou top si htop n'est pas installé).
Sous Ubuntu : le moniteur système pour un meilleur visuel.
Déjà installer part défaut.
https://websetnet.net/fr/comment-utiliser-le-gestionnaire-de-t%C3%A2ches-%C3%A0-Ubuntu/ (https://websetnet.net/fr/comment-utiliser-le-gestionnaire-de-t%C3%A2ches-%C3%A0-Ubuntu/)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 05 June 2021 à 10:09
Merci à vous !

Du coup l'énorme différence de conso RAM entre W10 et Ubuntu c'est la VM ?

Merci !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 05 June 2021 à 10:23
Bon, ben juste pour dire suis content de participer un peu plus à ce projet.
Bon week-end ! Et merci pour vos coups de main !
 :hello: :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fredjke le 05 June 2021 à 12:08
Bonjour,

Apparemment il faut un code d'invitation pour rejoindre le projet. Est-ce qu'il circule ? Comment l'obtenir ?

Merci
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 05 June 2021 à 12:16
Bonjour,

Apparemment il faut un code d'invitation pour rejoindre le projet. Est-ce qu'il circule ? Comment l'obtenir ?

Merci

Tu as le code en page d'accueil sur le site internet du projet :

Invitation code : 3VwMu3-eTCg32

Cordialement,
Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 05 June 2021 à 20:33
Du coup l'énorme différence de conso RAM entre W10 et Ubuntu c'est la VM ?
Ben oui of course, les inconvénients des tâches à VM-VB elles sont pour le cruncher (ressources, instabilité avec les "VM not manageable"...) et les avantages sont (en principe) pour le dev qui peut faire une appli multi-plateforme plus facilement, la preuve en est que QCPIA avait sortit très rapidement des applis pour les 3 plateforme, et après avoir sorti une appli linux native ben tout s'est arrêté faute de ressources humaines : faut des dev avec des compétences sur chaque OS pour faire une appli native dans chaque OS, beaucoup moins pour une appli VM-VB.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 05 June 2021 à 20:39
Ben oui of course, les inconvénients des tâches à VM-VB elles sont pour le cruncher (ressources, instabilité avec les "VM not manageable"...) et les avantages sont (en principe) pour le dev qui peut faire une appli multi-plateforme plus facilement, la preuve en est que QCPIA avait sortit très rapidement des applis pour les 3 plateforme, et après avoir sorti une appli linux native ben tout s'est arrêté faute de ressources humaines : faut des dev avec des compétences sur chaque OS pour faire une appli native dans chaque OS, beaucoup moins pour une appli VM-VB.

C'est un très bon résumé. Merci.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 06 June 2021 à 09:28
Merci pour vos explications !  :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fredjke le 06 June 2021 à 10:01
Merci!
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 06 June 2021 à 11:20
Ben oui of course, les inconvénients des tâches à VM-VB elles sont pour le cruncher (ressources, instabilité avec les "VM not manageable"...) et les avantages sont (en principe) pour le dev qui peut faire une appli multi-plateforme plus facilement, la preuve en est que QCPIA avait sortit très rapidement des applis pour les 3 plateforme, et après avoir sorti une appli linux native ben tout s'est arrêté faute de ressources humaines : faut des dev avec des compétences sur chaque OS pour faire une appli native dans chaque OS, beaucoup moins pour une appli VM-VB.

C'est un très bon résumé. Merci.

Vous me donnez envie de monter une crunchbox Linux Only  :siflotte: :miam:
Ptêt bien pendant l'été  :coffeetime:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 10 June 2021 à 07:36
Hello !  :hello:

Désolé si cette question a déjà été posée, mais qu'advient-il des UT en statut  'Validation non concluante (984)' ?

Merci  :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 10 June 2021 à 17:29
A. DTC
B. ça dépend des fois
C. ça dépend des autres
D. la réponse D
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 11 June 2021 à 06:29
A. DTC
B. ça dépend des fois
C. ça dépend des autres
D. la réponse D
KAMOULOX !
J'ai gagné m'sieur ?
Où y'a Tina Turner en opposition qui se rase la langue ?
Mon métier ? j'veux gagner de l'or en barre parce que le code de l'aviation civile interdit à un pancake de tomber d'un avion !
 :D

Non mais à part ça, sérieux ?

L'UT n'est pas envoyée à un autre cruncher, du coup c'est validé 'manuellement' ?

 :hello: :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 11 June 2021 à 09:35
Il y avait 2 réponses sérieuses dans ma liste, le B et la C :

B. peut-être une variabilité en fonction des résultats du calcul, qui ne serait validé "qu'après étude" ? (d'un algo, d'un humain... ?)
C. que dit l'UT ? quid des calculs faits par les autres crunchers ? le serveur attend ptet un "meilleur" résultat et si jamais on lui renvoie, le tien est mort ? si personne ne le trouve, tout le monde est mort ?

ou un mix des deux...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 18 June 2021 à 10:20
Vu le nombre et la taille des fichiers à traiter, on n'a pas mis en place de procédure manuelle.
On parle de centaines de millier de molécules et c'est ingérable manuellement  :/

Par contre, on a regardé quelques cas et il s'agit de cas pas assez instables pour casser dès le départ mais le résultat final est trop aléatoire. Du coup on est arrivé à : quand on ne trouve pas 2 fois le même résultat parmi 8 calculs (je trouve que c'est déjà beaucoup), on conclue qu'il s'agit d'une molécule instable. Évidemment, on commence par deux calculs, puis un 3ème s'ils ne sont pas d'accord, puis un 4ème ...
L'autre cas possible que j'ai identifié, c'est la combinaison de trop d'hôtes qui partent en erreur ou qui annule les tâches. Il se peut qu'un seul calcul est abouti, mais il ne peut pas être vérifié, il est donc éliminé à notre grand regret... C'est le comportement par défaut du serveur et je n'ai pas trouvé de moyen satisfaisant de géré ça. Il faudrait un stagiaire pour rendre ça plus robuste et propre...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 18 June 2021 à 18:18
La recherche sans stagiaire, c'est la mouise :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fredjke le 19 June 2021 à 08:43
Pour le moment, toute mes unités partent en erreurs, il y a quelque chose à faire pour pallier au soucis ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 19 June 2021 à 09:16
Pour le moment, toute mes unités partent en erreurs, il y a quelque chose à faire pour pallier au soucis ?

dans tes fichiers je peux voir :
VBoxManage.exe: error: Not in a hypervisor partition (HVP=0) (VERR_NEM_NOT_AVAILABLE).
VBoxManage.exe: error: AMD-V is disabled in the BIOS (or by the host OS) (VERR_SVM_DISABLED)
VBoxManage.exe: error: Details: code E_FAIL (0x80004005), component ConsoleWrap, interface IConsole

je conseille d'installer une VM Linux et de mettre boinc à l'intérieur. Ainsi, ça utilisera l'application native Linux et franchement ça marche mieux que le wrapper Boinc Vbox.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: fredjke le 19 June 2021 à 09:49
Merci, je vais tenter ça. Le AMD-V doit être activé dans le bios apparemment ? Il refuse même pour l'installation de la VM avec le oracle VM virtualbox installé en même temps que Boinc
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 19 June 2021 à 11:48
AMD-V c'est pour justement faire de la virtualisation.

Donc ouais, active le :o
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 20 June 2021 à 19:39
Très curieux, sans rien toucher à ma VM linux qui fait du QCPIA depuis quelques temps (10 threads alloués), alors même que j'avais un RAC riquiqui depuis le début (lire plus haut), soudain il se met à créditer beaucoup plus :

(https://nsa40.casimages.com/img/2021/06/20/21062007505875323.png)

(https://toiledefond.net/wp-content/uploads/2017/10/Etonnant-non-.jpg)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 20 June 2021 à 19:42
Je viens d'avoir le droit de relancer la ferme de calcul. Du coup, j'ai validé pas mal de calcul qui étaient en attente  :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 20 June 2021 à 19:51
Ahhhhhhh :D
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 21 June 2021 à 06:53
Vu le nombre et la taille des fichiers à traiter, on n'a pas mis en place de procédure manuelle.
On parle de centaines de millier de molécules et c'est ingérable manuellement  :/

Par contre, on a regardé quelques cas et il s'agit de cas pas assez instables pour casser dès le départ mais le résultat final est trop aléatoire. Du coup on est arrivé à : quand on ne trouve pas 2 fois le même résultat parmi 8 calculs (je trouve que c'est déjà beaucoup), on conclue qu'il s'agit d'une molécule instable. Évidemment, on commence par deux calculs, puis un 3ème s'ils ne sont pas d'accord, puis un 4ème ...
L'autre cas possible que j'ai identifié, c'est la combinaison de trop d'hôtes qui partent en erreur ou qui annule les tâches. Il se peut qu'un seul calcul est abouti, mais il ne peut pas être vérifié, il est donc éliminé à notre grand regret... C'est le comportement par défaut du serveur et je n'ai pas trouvé de moyen satisfaisant de géré ça. Il faudrait un stagiaire pour rendre ça plus robuste et propre...

Hello !  :hello:

Merci beaucoup pour tes explications  :jap:

Perso, j'ai du annuler plusieurs fois des UT's car mes machines en recevaient trop ... (je loue du temps de calcul à l'heure ...  :hyperbon:)
Du coup j'ai mis priorité '0' pour en recevoir moins.

Pour les UT's 'invalides', et il y en a pas mal si on fait le total du temps de calcul 'perdu' (pas un reproche, je n'y comprends rien)
mais qui ne correspondent pas tout à fait à la description ci-dessus.

Par exemple : https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=2566198 (https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=2566198)
Pourquoi envoyer une UT 7x si les 6 premiers résultats sont "mauvais" ?

J'en ai environ 75 sur la machine 2558367, et plusieurs centaines sur mes autres machines.

Est-il possible de ne plus envoyer une UT si les 2 ou 3 premiers calculs sont 'mauvais' ?
("Trop de résultats (peut être non déterministe) Trop de résultats totaux")

Cette UT https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=2558367 (https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=2558367) est invalide car "Trop de résultats totaux"  :??:

Concernant les 'validation non concluantes', j'en ai regardé 1 ou 2, et idem. Elles sont parfois calculées 4x avec le résultat 'validation non concluante' mais tout de même renvoyée à quelqu'un pour un 5° calcul .... ? https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=2517604 (https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=2517604) https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=2566815 (https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=2566815)

Est-ce qu'un maximum de 4 calculs aboutis ne suffirait pas ?

Merci beaucoup !  :jap:

 :hello:  :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 21 June 2021 à 08:38
 :hello:

Je me suis posé beaucoup de questions pour notre projet... le logiciel serveur est livré avec 3 réglages de maximum : erreurs/total/succès
Au début, je me suis dit "Super! on va pouvoir bien régler le bouzin... ", sauf que ces 3 catégories ne sont pas très bien documentées et ne sont pas si claires. Par exemple, j'ai pu observé que les erreurs comprenaient les annulations des utilisateurs :priz2tet: Donc avec les problèmes des VM, les annulations et les erreurs classique inévitables, j'ai mis 8 et je peux déjà dire que ce n'est pas toujours suffisant... Nous perdons parfois des molécules qui ne seront jamais calculées  :priz2tet:

Pour le nombre de calcul succès, j'ai choisi 6 pour trouver un compromis pour "essayer de sauver le plus de calculs possibles". Dès que deux machines trouvent le même calcul (avec une très très grande tolérance), je valide ! Thomas, le chimiste a été très surpris de voir deux calculs ne pas donner le même résultat. 6 résultats tous différents, ça nous laisse sans voix... Ce projet, unique au monde, nous fait découvrir pleins de choses, même les erreurs de calcul. Dommage que ça ne rapporte pas de crédit pour vous remercier...

En tout cas, merci pour l'aide.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: DocPhilou1966 le 21 June 2021 à 13:47
Merci pour ta réponse et merci pour le projet :)  :plusun:
Je veux, dans un premier temps, mon badge des 2M  :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 July 2021 à 11:24
C'est quand même curieux je suis retombé à une prod minimaliste avec mes 10 threads linux qui continuent de faire le même taff... ça ne cesse de décliner jour après jour, hier j'avais 3600 crédits, j'avais dû monter à 15000 ou je sais plus combien...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 04 July 2021 à 13:22
oui, pareil ici. Je pense qu'on est sur une mauvaise fournée : une partie de l'univers chimique particulièrement instable  :??:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 04 July 2021 à 14:09
Si on dépend de l'univers chimique maintenant, on est fichus :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 11 July 2021 à 19:46
:hello: damotbe,

Je m'interroge sur les deux tâches qui sont en cours chez moi... Soit c'est des molécules hyper-stables, soit elles sont plantées depuis longtemps à cause des mises en veille de l'ordi. Cf. capture jointe pour les références.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 11 July 2021 à 20:26
:hello: damotbe,

Je m'interroge sur les deux tâches qui sont en cours chez moi... Soit c'est des molécules hyper-stables, soit elles sont plantées depuis longtemps à cause des mises en veille de l'ordi. Cf. capture jointe pour les références.

 :jap:

c'est peut-être un plantage ou une molécule qui ne veut pas converger. Je pense que tu peux annuler sans conséquence pour nous.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 11 July 2021 à 23:29
Merci pour ton retour, damotbe :jap: Au moins elles auront fait progresser le compteur WUprop ;)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 12 July 2021 à 08:53
Merci pour ton retour, damotbe :jap: Au moins elles auront fait progresser le compteur WUprop ;)

Puis pour nous elle sera classée dans les molécules problématiques.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 19 August 2021 à 21:40
Je crois que le serveur est en difficulté : plus accessible et les unités ne sont plus transmises  :(
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 20 August 2021 à 06:23
Je crois que le serveur est en difficulté : plus accessible et les unités ne sont plus transmises  :(
Citer
Dear members.

For electrical checking reasons (in the whole university), the server must be shut down from tomorrow August 16th for about a week. I hope to be able to restart everything on August 23rd.

Sincerely
Benoit
En Français  :kookoo:
Citer
Chers membres.

Pour des raisons de vérification électrique (dans toute l'université), le serveur doit être arrêté à partir de demain 16 août pour environ une semaine. J'espère pouvoir tout redémarrer le 23 août.

Sincèrement
Benoit
.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 23 August 2021 à 10:05
 :hello:

Retour de l'électricité : c'est reparti !  :hyperbon: :hyperbon: :hyperbon:

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 23 August 2021 à 11:35
 :bipbip:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 23 August 2021 à 13:26
J'ai nettoyé le water-cooling de ma configuration principale ce week-end, pile-poil !

:hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 30 August 2021 à 17:13
:hello:

Viens de recevoir un MP d'un autre cruncheur pour me dire que mon ordi est un "bad host" :siflotte: (cf. PJ)
C'est vrai que les tâches ne durent que 3 secondes, mais elles ne finissent jamais en erreur de calcul et j'avoue ne pas aller sur mon compte pour connaître leur statut final (visiblement "validate error" pour toutes) :desole:
Ai-je vraiment un problème comme semble le suggérer PDW?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 01 September 2021 à 08:29
Oui tu as un problème, j'ai oublié de te contacter.
Parfois ça arrive après une mise à jour sous Ubuntu. ça m'a causé pas mal de tracas il y a quelques mois.  :priz2tet:

La solution proposée par un utilisateur: https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=129&postid=1279 (https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=129&postid=1279)
En version courte : utiliser la version du dépôt Ubuntu
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 01 September 2021 à 09:45
Sauf que je ne suis pas sous Ubuntu mais sous Manjaro (Archlinux) :/ Et je prends toujours Boinc (et tous les autres logiciels) des dépôts - excepté pour BSF.

Je me demande si le souci ne viendrait pas plutôt de mon ordi (CM/processeur), vu les conneries qu'il peut me faire parfois. En attendant de trouver une solution, vais mettre le projet en pas de nouveau travail - snif!
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 01 September 2021 à 20:59
Je suis presque sûr que ça vient d'une mise à jour. On a vu ce cas tellement de fois! Essaye de temps en temps quelques jobs pour voir ou installe une autre version de Boinc.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 01 September 2021 à 22:02
Ça devra attendre la prochaine Linux Install Party (début octobre) ;) Je demanderai au spécialiste.
C'est la rentrée - pour mes clients aussi... Pendant deux mois tu te tournes presque les pouces et en une journée t'as du taf pour une dizaine de jours, soirées et weekend inclus :D

Sinon: même si c'est du natif sous Linux, est-ce que ça peut avoir un lien avec la version de VirtualBox?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 September 2021 à 07:26
Ça devra attendre la prochaine Linux Install Party (début octobre) ;) Je demanderai au spécialiste.
C'est la rentrée - pour mes clients aussi... Pendant deux mois tu te tournes presque les pouces et en une journée t'as du taf pour une dizaine de jours, soirées et weekend inclus :D

Sinon: même si c'est du natif sous Linux, est-ce que ça peut avoir un lien avec la version de VirtualBox?

Non, je ne pense pas.
Bon courage pour le taf
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 02 September 2021 à 09:11
:jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 20 September 2021 à 10:54
20/09/2021 06:59:25 | QuChemPedIA@home | Tâche cl9_athome_b3lyp-321gd,batch163,001630127,nwchem,1614410085_1 reportée de 86400 secondes : Tâche VM ingérable, redémarrage ultérieur.

Que dois-je faire?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 21 September 2021 à 16:41
Prier. Mais si ça repart joue au loto direct, on sait jamais.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 25 September 2021 à 09:12
Oui tu as un problème, j'ai oublié de te contacter.
Parfois ça arrive après une mise à jour sous Ubuntu. ça m'a causé pas mal de tracas il y a quelques mois.  :priz2tet:

La solution proposée par un utilisateur: https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=129&postid=1279 (https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=129&postid=1279)
En version courte : utiliser la version du dépôt Ubuntu

Coucou damotbe, apparemment le problème venait de Boinc/BSF. Suite à la dernière installation de mises à jour, Boinc ne voulait plus démarrer. Je l'ai donc également mis à jour à la dernière version (7.16.19) et - miracle - je viens de voir 400 points en face de la ligne QuChemPedIA dans mes stats et j'ai 2 tâches en cours depuis >2h :love: :love: Ça a également "réparé" mon problème de VM :)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 27 September 2021 à 11:08
Oui tu as un problème, j'ai oublié de te contacter.
Parfois ça arrive après une mise à jour sous Ubuntu. ça m'a causé pas mal de tracas il y a quelques mois.  :priz2tet:

La solution proposée par un utilisateur: https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=129&postid=1279 (https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=129&postid=1279)
En version courte : utiliser la version du dépôt Ubuntu

Coucou damotbe, apparemment le problème venait de Boinc/BSF. Suite à la dernière installation de mises à jour, Boinc ne voulait plus démarrer. Je l'ai donc également mis à jour à la dernière version (7.16.19) et - miracle - je viens de voir 400 points en face de la ligne QuChemPedIA dans mes stats et j'ai 2 tâches en cours depuis >2h :love: :love: Ça a également "réparé" mon problème de VM :)

excellente nouvelle !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 27 September 2021 à 18:50
27/09/2021 12:39:11 | QuChemPedIA@home | Task cl9_athome_b3lyp-321gd,batch126,001262053,nwchem,1614420522_1 postponed for 86400 seconds: VM job unmanageable, restarting later.

Et pour ça, as-tu une solution?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 27 September 2021 à 20:13
Un stagiaire. Qui recode tout en natif.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 29 September 2021 à 20:32
27/09/2021 12:39:11 | QuChemPedIA@home | Task cl9_athome_b3lyp-321gd,batch126,001262053,nwchem,1614420522_1 postponed for 86400 seconds: VM job unmanageable, restarting later.

Et pour ça, as-tu une solution?

non, à part redémarrer  :siflotte:
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 30 September 2021 à 17:21
redémarrer

Blasphème :o
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maeda le 30 September 2021 à 21:19
La solution du Windowzien :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 01 October 2021 à 15:29
(https://www.totaltechcare.com/images/easyblog_shared/January_2020/1-29-20/ib_img3.gif)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 03 October 2021 à 23:31
(https://www.totaltechcare.com/images/easyblog_shared/January_2020/1-29-20/ib_img3.gif)

J'adore cette série  :D :D :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 03 October 2021 à 23:32
Notre dernier article est paru :

https://jcheminf.biomedcentral.com/articles/10.1186/s13321-021-00554-8 (https://jcheminf.biomedcentral.com/articles/10.1186/s13321-021-00554-8)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 04 October 2021 à 15:37
OUCH !

Comment dire, "sauvage et beau" :gno:

Petite trad deepl du résumé !

Citer
La diversité chimique est l'un des termes clés de l'apprentissage automatique et de la génération moléculaire. Cela est particulièrement vrai pour les ensembles de données de chimie quantique. La composition de ces derniers doit être effectuée méticuleusement car le calcul est très exigeant en temps. Nous avons vu précédemment que le jeu de données de chimie quantique le plus connu, QM9, manque de diversité chimique. Par conséquent, les modèles ML formés sur QM9 ont montré des lacunes en matière de généralisation. Dans cet article, nous souhaitons présenter (i) une méthode rapide et générique pour évaluer la diversité chimique, (ii) un nouveau jeu de données de chimie quantique de 435 000 molécules, OD9, qui comprend QM9 et de nouvelles molécules générées avec un objectif de diversité, (iii) une analyse de l'impact de la diversité sur la génération de molécules sans contrainte et avec un objectif sur l'exemple de l'optimisation QED. Notre approche innovante permet d'estimer individuellement l'impact d'une solution sur la diversité d'un ensemble, permettant ainsi une évaluation incrémentale efficace. Dans la première application, nous verrons comment la contrainte de diversité nous permet de générer plus d'un million de molécules qui compléteraient efficacement les ensembles de données de référence. Les composés ont été calculés avec la DFT grâce à un effort collaboratif à travers le projet BOINC QuChemPedIA@home. En ce qui concerne la génération moléculaire dirigée vers un but, obtenir un score QED élevé n'est pas compliqué, mais ajouter un peu de diversité peut réduire le nombre d'appels à la fonction d'évaluation d'un facteur dix...
:gnu: :gni:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 01 November 2021 à 11:52
J'ai lancé le projet QuChemPedIA.
J'ai reçu 1246 UTs.

En une demie heure : toutes calculées en quelques secondes seulement pour chacune.
549 Invalide
699 Validation en attente
0 erreur, 0 valide et 0 non concluante
Puis, le projet refuse de m'en envoyer d'autres !

Dois-je laisser tourner ce projet ou alors se peut-il qu'il y ait un bug ou une incompatibilité avec mon CPU ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 01 November 2021 à 12:02
Quel est ton OS et ta version de Boinc/BSF?

J'ai eu le même souci et apparemment il était dû au BSF 7.14.2 sous Linux, car depuis que j'ai fait la màj vers Boinc 7.16.xx sans BSF je n'ai plus de problème.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 01 November 2021 à 13:04
Pour linux :
NAME="Ubuntu"
VERSION="21.04 (Hirsute Hippo)"
ID=ubuntu
ID_LIKE=debian
PRETTY_NAME="Ubuntu 21.04"
VERSION_ID="21.04"

Et pour BOINC :
7.16.11 avec le BSF qui va avec.

Je ne peux donc pas faire de QuChemPedIA si j'ai BSF ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 01 November 2021 à 20:20
Je ne sais pas. Je n'ai pas encore testé la 7.16.11 :spamafote:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 01 November 2021 à 20:46
Merci modesti !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 02 November 2021 à 10:10
Oui, BSF pose problème...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 02 November 2021 à 12:53
Bon, ben alors je serai obligé de faire une campagne QuChemPedIA quand je changerai de version BOINC et que je n'aurai pas encore installé BSF.
Si en attendant quelqu'un peut faire quelques chose, il faudra nous prévenir ici...

Ceci dit, j'ai souvenir d'avoir essayé avant l'installation de BSF et le comportement semblait le même.
Mais bien entendu sur un nombre plus restreint d'UTs.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 02 November 2021 à 13:07
<<<<heu c'est quoi BSF?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 02 November 2021 à 13:26
<<<<heu c'est quoi BSF?
Boinc sans frontières.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 November 2021 à 10:30
Antares me dis pas que tu n'accèdes pas à la Z51 ??
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 03 November 2021 à 20:49
Heuuuuu...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 03 November 2021 à 23:28
Un modo qui ne connait pas la Z51 :eek:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 04 November 2021 à 08:22
Un modo qui ne connait pas la Z51 :eek:
Je dirais même plus: un membre de la CàA ;)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Kao le 04 November 2021 à 11:34
Voilà un retournement de situation inattendu.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 04 November 2021 à 13:38
Bon, ça va...
ça vous arrive pas un trou de mémoire?..  :ayalou:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 04 November 2021 à 13:47
C'est Alzheimer qui commence....

OK, je sort....
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: melektha le 04 November 2021 à 14:14
Bon, ça va...
ça vous arrive pas un trou de mémoire?..  :ayalou:

Si, mais c'est si bon de vanner quand ça arrive à qqun d'autre  :coffeetime: :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 04 November 2021 à 19:06
Bon, ça va...
ça vous arrive pas un trou de mémoire?..  :ayalou:

Si, mais c'est si bon de vanner quand ça arrive à qqun d'autre  :coffeetime: :D
J'avoue, c'est trop tentant des fois :ange:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 04 November 2021 à 19:55
Bref Antares c'est bon tu as localisé la bête ?? :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 04 November 2021 à 20:31
Ben oui...
Boinc S------ F----
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 05 November 2021 à 18:49
:+1:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: popolito le 11 December 2021 à 11:31
Salut salut !

Mon dernier post date de près de 10 ans mais c'est le retour sur BOINC.

Petite question : quelqu'un a déjà crunché sur QuChemPedIA sur un Odroid ou un Raspberry sous Linux ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 11 December 2021 à 11:34
Salut salut !

Mon dernier post date de près de 10 ans mais c'est le retour sur BOINC.

Petite question : quelqu'un a déjà crunché sur QuChemPedIA sur un Odroid ou un Raspberry sous Linux ?

Bon retour !!!

A ma connaissance il n'y a pas d'application ARM pour QuChemPedIA (Donc pas de Raspberry ni d'Android).

Le mieux est de faire tourner ce projet sur Linux (comme Ubunto par exemple).

Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 11 December 2021 à 11:40
Ca alors ! un popolito !! popopopopop !!! :kookoo:

Pour QCPIA au début ils ont développé que des applis via VirtualBox mais, ayant toutes sortes de soucis, le stagiaire a fait une version native pour linux, et je pense qu'il(s) voulai(en)t poursuivre pour les autres OS mais après le stagiaire est parti, et n'ayant (apparemment) plus eu de ressources de dev (damotbe me corrigera si je dis des conneries) ben ça en est resté là.

Donc oui sous linux c'est plus facile, sous windows ou mac (car grâce à VB ben y'avait une appli mac ! c'est un peu l'idée aussi...) ben t'avais des chances variables (mais moi sous mac ça marchait pas mal, ça fait longtemps que j'en ai plus fait) mais le stagiaire avait pas eu le temps de pondre d'autres versions / OS...

D'ailleurs tu peux constater que les dernières versions d'appli datent de février 2020.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: naz le 11 December 2021 à 11:42
Bon retour popolito  :kookoo:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 11 December 2021 à 12:18
Mon dernier post date de près de 10 ans 
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 11 December 2021 à 13:03
 :hello: Le revenant
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: popolito le 11 December 2021 à 13:37
Merci pour vos réponses et vos messages !  :D (je viens de capter que j'étais un troll quand j'étais jeune, je suis beaucoup plus sérieux maintenant ! Enfin... Presque)

Et bon courage à damotbe, c'est toujours plaisant de contribuer à la science, mais si en plus, ça peut être pour nos chercheurs français, alors là :
(https://media4.giphy.com/media/5h47ZcimaRY8HSwJq5/giphy.gif)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 12 December 2021 à 12:17
Merci pour vos réponses et vos messages !  :D (je viens de capter que j'étais un troll quand j'étais jeune, je suis beaucoup plus sérieux maintenant ! Enfin... Presque)
J'ai souvenir d'un troll sympathique qui me faisait bien marrer :D

Citer
Et bon courage à damotbe, c'est toujours plaisant de contribuer à la science, mais si en plus, ça peut être pour nos chercheurs français, alors là :
(https://media4.giphy.com/media/5h47ZcimaRY8HSwJq5/giphy.gif)
Toutafey !!
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 12 December 2021 à 18:12
 :hello:

Oui, le conseil c'est de faire tourner le projet sous Linux. On n'est pas financé pour notre projet, on fait avec des bouts ficelles  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: popolito le 12 December 2021 à 20:31
Je suis sous Linux mais sur structure ARM  :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 12 December 2021 à 21:54
:hello:

Oui, le conseil c'est de faire tourner le projet sous Linux. On n'est pas financé pour notre projet, on fait avec des bouts ficelles  :/
C'est triste ça quand même :(
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: zelandonii le 12 December 2021 à 22:20
:hello:

Oui, le conseil c'est de faire tourner le projet sous Linux. On n'est pas financé pour notre projet, on fait avec des bouts ficelles  :/

Comme toujours. L'éternel problème français, et en particulier celui de la science...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 12 December 2021 à 23:46
Et de la justice, et de l'éducation, et de la santé, et... je m'égare.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 13 December 2021 à 18:39
Oui, BSF pose problème...

Je confirme et j'affirme : le problème, ce n'est pas BSF !
J'ai fait une fausse manip et j'ai dû réinstaller Boinc.
Je n'ai donc plus BSF.
Comportement identique à ce qui est décrit ici :

J'ai lancé le projet QuChemPedIA.
J'ai reçu 1246 UTs.

En une demie heure : toutes calculées en quelques secondes seulement pour chacune.
549 Invalide
699 Validation en attente
0 erreur, 0 valide et 0 non concluante
Puis, le projet refuse de m'en envoyer d'autres !

Dois-je laisser tourner ce projet ou alors se peut-il qu'il y ait un bug ou une incompatibilité avec mon CPU ?

QuChemPedIA ne peut pas fonctionner sur mon ordinateur et je ne sais pas pourquoi ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 14 December 2021 à 09:21
Windows ? t'as essayé sous linux / VM linux ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 14 December 2021 à 19:47
Je suis sous Linux, pas sous Windows.
Y'a une VM pour ce projet ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 14 December 2021 à 23:45
Windows et macOS c'est des applis à base de VM/VB, linux c'est du natif linux.

Si ça marche pas sous linux essayer de publier le log d'une des tâches des fois que damotbe puisse éventuellement y voir quelque chose d'utile. Ou toi :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 15 December 2021 à 09:13
Je ne sais pas ce qu'est le log ?
Le seul truc que je puisse retrouver sur une tâche s'appelle le "Stderr Output" et le voici pour une de ces tâches :

<core_client_version>7.16.16</core_client_version>
<![CDATA[
<stderr_txt>
18:04:41 (355995): wrapper (7.5.26014): starting
18:04:41 (355995): wrapper: running worker.sh ()
Jobs starts with 1 cores
STEP OPT : Starting
Create output archive
OPT.out
Normal termination.
18:04:43 (355995): worker.sh exited; CPU time 0.896310
18:04:43 (355995): called boinc_finish(0)

</stderr_txt>
]]>
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 15 December 2021 à 13:50
C'est exactement ça "le log" :)

T'as l'URL de la tâche ? parce que donc elles ne sont pas en erreur, c'est ça ? juste qu'elles tournent à peine et se termine ?

Faudrait que damotbe regarde cela...
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 15 December 2021 à 15:34
T'as l'URL de la tâche ? parce que donc elles ne sont pas en erreur, c'est ça ? juste qu'elles tournent à peine et se termine ?

https://quchempedia.univ-angers.fr/athome/result.php?resultid=8003613 (https://quchempedia.univ-angers.fr/athome/result.php?resultid=8003613)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 15 December 2021 à 18:36
Ben en plus de son statut final "succès" ça dit bien qu'elle a tourné

Citer
Temps de fonctionnement   2 min 23 sec

Pas longtemps mais elle a tourné, c'est juste que l'UT (https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=3004795) est en attente de traitement sur une autre bécane avant d'obtenir les faramineux crédits qui t'incombent.

What iz ze problem ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 15 December 2021 à 20:23
Le problème, c'est que absolument aucune UT ne se valide.
Elles passent toutes en Invalide.
Et pas une seule n'a pris plus de 3 minutes de temps de calcul.
Ce n'est pas un fonctionnement normal !
En tout cas, ça ne ressemble pas du tout à ce que faisait ma machine d'avant !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 16 December 2021 à 14:12
Certes. Faut attendre que damotbe passe pour avoir son avis...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Maurice Goulois le 16 December 2021 à 15:18
J'ai arrêté sur ce projet, trop de non concluants et il est un peu abusif au niveau vm (pour mes configs).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Sébastien le 17 December 2021 à 21:27
Je confirme que le problème ne provient pas de BSF mais d'une sécurité accrue dans systemd.
Pour corriger le problème, il faut éditer le fichier /lib/systemd/system/boinc-client.service et modifier la ligne ProtectSystem :

Arrêt du client BOINC
sudo systemctl stop boinc-client

Edition du fichier boinc-client.service => ProtectSystem=full au lieu de ProtectSystem=strict
sudo sed -i 's/ProtectSystem=strict/ProtectSystem=full/g' /lib/systemd/system/boinc-client.service

MAJ du daemon
sudo systemctl daemon-reload

Démarrage du client BOINC
sudo systemctl start boinc-client
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 18 December 2021 à 10:28
WAOUH, BIEN VU SÉBASTIEN !

 :eek:

J'ai enfin des "Valides" et un peu de "Validation non concluante", mais il parait que c'est normal.
Ça fonctionne enfin.
Superbe !

@damotbe :
Avec toutes ces histoires, j'avais bien 2000 UTs qui étaient passées en "Invalide".
J'espère que ça n'a pas foutu la m...  et que ces UTs ne vous auront pas donné de fausses informations.
Mais si j'ai bien compris, ce ne sont pas les "Invalides" que vous considérez comme des molécules sans intérêt, mais les "non concluantes".
Et celles-ci, je n'en avais pas avant la manip de Sébastien.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 18 December 2021 à 11:09
Bigre. C'est beau. :jap:

Mais ça s'applique à certaines versions de linux ? à certaines machines / configurations ?

Je n'avais jamais eu ce problème quand j'en avait fait un peu sous linux, de lointaine mémoire...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Sébastien le 18 December 2021 à 11:21
Ce problème n'existe qu'avec les distributions récentes : Debian 11, Ubuntu 21.10, ...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 18 December 2021 à 11:47
Chez-moi, cela n'a affecté que ce projet.
Il n'est pas possible d'inclure dans le projet une instruction qui contourne ceci ?
Car certainement beaucoup de monde ajoutera ce projet sans forcément venir lire ce topic et donc pouvoir régler le problème.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 27 December 2021 à 10:02
Désolé, je suis débordé... Je viens de terminer 2 paquets de copies et j'ai des projets d'étudiants à corriger...
Le problème était connu m'ai je n'avais jamais trouvé de solution ! Merci Sébastien !
On avait identifié que ça venait des distributions récentes et je suspectais une fonctionnalité noyau en termes de sécurité, mais par manque de temps et de connaissances j'en étais resté là.

 :jap:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 27 December 2021 à 10:04
@damotbe :
Avec toutes ces histoires, j'avais bien 2000 UTs qui étaient passées en "Invalide".
J'espère que ça n'a pas foutu la m...  et que ces UTs ne vous auront pas donné de fausses informations.
Mais si j'ai bien compris, ce ne sont pas les "Invalides" que vous considérez comme des molécules sans intérêt, mais les "non concluantes".
Et celles-ci, je n'en avais pas avant la manip de Sébastien.

oui, ça ne devrait pas poser de problème, on a eu bien pire à gérer
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 27 December 2021 à 10:06
Chez-moi, cela n'a affecté que ce projet.
Il n'est pas possible d'inclure dans le projet une instruction qui contourne ceci ?
Car certainement beaucoup de monde ajoutera ce projet sans forcément venir lire ce topic et donc pouvoir régler le problème.

oui, on a constaté la même chose et c'est étrange... bon j'avoue ne pas avoir bien compris les implications du problème et de la solution. Je ne vais pas avoir le temps de creuser noin plus ...  :(
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 31 December 2021 à 15:54
Bravo Sébastien !

C'est déjà une bonne chose que la solution apparaissent ici. Il est peut-être possible de rajouter des mots-clés dans le message de solution ou modifier l'en-tête du topic pour que notre ami G**gle l'indexe au mieux et redirige les âmes perdues en recherche de solution.

PS : j'oserai même rêver une traduction anglaise ?

 :hello:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 16 January 2022 à 17:23
Je préfère la version française (je comprends mieux) !  :D



Finalement, il y avait eu des suites à cette excellente vidéo ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 16 January 2022 à 20:04
Visiblement non, après il s'est passionné pour les électrons (https://www.youtube.com/channel/UCO9B_16_nKjk3qaeRX6G9PA/videos).

Mais la vidéo du dessus a été vue 100 fois... dur de faire un tel boulot pour si peu d'intérêt à mon avis.

Pas facile de parler de science à l'époque d'Hanouna.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 16 January 2022 à 20:22
100 fois seulement !
Je n'avais pas fait gaffe.
Pourtant, c'est une des meilleures que j'ai jamais vue.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: zelandonii le 16 January 2022 à 22:07
Jamais eu un problème sur ce projet. Je crédite entre 8000 et 10 000/jour.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] cottesloe le 21 January 2022 à 11:26
Je viens juste de rejoindre ce projet, que je découvre.
Pas simple à comprendre le but du projet  :??:
Une UT en cours...  :hyperbon:  Wait and see...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 21 January 2022 à 11:40
Si tu vas au début de ce topic sur les 2 premiers posts de damotbe (partie prenante dans l'université sur ce projet) il y a des infos.

Mais après si t'es pas "dans le domaine" comme la plupart d'entre nous, tu captes que dalle (comme moi) et c'est bien normal :D

Mais c'est cool, c'est un projet français avec un membre de l'AF en plein dedans, avec très peu de ressources (projet français, j'ai dit) donc damotbe rame, mais le projet est toujours là et c'est bien.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 21 January 2022 à 19:13
J'aime soutenir ce projet au carrefour de plusieurs disciplines : chimie, chimie quantique... Mais oui, c'est assez dur à piger.
Regarde la vidéo citée ci-dessus, je la trouve passionnante !
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] Dudumomo le 22 January 2022 à 03:10
Je préfère la version française (je comprends mieux) !  :D



Finalement, il y avait eu des suites à cette excellente vidéo ?

Je n'avais pas vu cette video, tres belle presentation! Et ils ont une version en anglais aussi, c'est cool!
Merci du partage
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 22 January 2022 à 13:04
Finalement, il y avait eu des suites à cette excellente vidéo ?

Nous sommes totalement débordés... j'espère retrouver un peu d'air en avril et j'espère que Thomas pourra se remettre dedans avec moi
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 22 January 2022 à 13:07
Courage ! vous vaincrez !! :kookoo:  :calin:
Titre: Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 22 January 2022 à 14:44
Finalement, il y avait eu des suites à cette excellente vidéo ?

Nous sommes totalement débordés... j'espère retrouver un peu d'air en avril et j'espère que Thomas pourra se remettre dedans avec moi

Waouh !
Je pensais que c'était mort pour la suite !
Je serai le premier à voir la nouvelle vidéo si vous en faites une en avril.

Mais oui, prenez votre temps, on attendra.
On crunche pour le moment, "plus que" 468592 UTs à calculer sur la série en cours.
On va y arriver, on ne relâche pas l'effort.

Bon courage à vous, comme le dit Jérôme, vous vaincrez, vous tiendrez...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 22 January 2022 à 18:23
Peut-on espérer une appli windows un jour?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 23 January 2022 à 10:44
sans virtualisation, non. Mais on est bien conscient que la virtualisation n'est pas idéale...
Titre: Re : Re : Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 23 January 2022 à 10:49
Finalement, il y avait eu des suites à cette excellente vidéo ?

Nous sommes totalement débordés... j'espère retrouver un peu d'air en avril et j'espère que Thomas pourra se remettre dedans avec moi

Waouh !
Je pensais que c'était mort pour la suite !
Je serai le premier à voir la nouvelle vidéo si vous en faites une en avril.

Mais oui, prenez votre temps, on attendra.
On crunche pour le moment, "plus que" 468592 UTs à calculer sur la série en cours.
On va y arriver, on ne relâche pas l'effort.

Bon courage à vous, comme le dit Jérôme, vous vaincrez, vous tiendrez...

C'est ce genre de vidéo/contenu qu'on devrait partager sur la page Facebook de l'AF pour toucher un peu plus de monde.

Dommage que les réseaux sociaux de l'AF soit délaissés (pourtant javais soumis ma candidature.

Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 23 January 2022 à 11:13
Heu ben si t'es volontaire ça serait super (même si bcp d'entre nous ne mettons pas les pieds sur FB) sauf que je sais plus du tout qui avait créé cette page :gnu:

Tu devrais en reparler dans le topic ad-hoc ptet ? on sait jamais, sur un malentendu - on est un peu sourds ;)
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 23 January 2022 à 11:32
Heu ben si t'es volontaire ça serait super (même si bcp d'entre nous ne mettons pas les pieds sur FB) sauf que je sais plus du tout qui avait créé cette page :gnu:

Tu devrais en reparler dans le topic ad-hoc ptet ? on sait jamais, sur un malentendu - on est un peu sourds ;)

Déjà évoqué ici : https://forum.boinc-af.org/index.php/topic,5335.0.html

On est 2 volontaires a attendre une réponse depuis septembre 2021.

Kali.

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 23 January 2022 à 16:20
Je suis allé faire toc-toc :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 14 February 2022 à 16:38
Serveurs down il me semble ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 14 February 2022 à 19:17
Oui, cela fait quelques heures !
Je vais surveiller...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: zelandonii le 14 February 2022 à 20:41
Oui, aucune UT.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 14 February 2022 à 21:12
Je n'en ai plus que pour quelques heures !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 14 February 2022 à 22:51
La diversification est la clé du succès :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] cottesloe le 15 February 2022 à 08:21
C'est dommage, j'ai une vingtaine d'UTs calculées en attente d'envoi...  :(
Pourvu que les serveurs reviennent vite !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 15 February 2022 à 13:23
Bonjour à tous. Notre serveur attendait son déménagement depuis quelques temps déjà... Et c'était hier ! Nous allons en profiter pour faire une mise à jour importante du système. J'espère que tout rentra dans l'ordre d'ici jeudi ou vendredi

 :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 15 February 2022 à 13:40
Merci pour les infos, on attends patiemment en allant sur d'autres projets  :jap:

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] cottesloe le 15 February 2022 à 15:13
Merci pour les infos !
 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 15 February 2022 à 19:27
OK, j'ai 264 UTs terminées.
Elles partiront quand vous aurez remis le serveur en route !
Et dans la journée, je relancerai alors le projet.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 17 February 2022 à 17:20
C'est reparti ! :hyperbon: :hyperbon: :hyperbon:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 17 February 2022 à 17:50
C'est reparti ! :hyperbon: :hyperbon: :hyperbon:

Youpi !!


 :yahoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 17 February 2022 à 18:42
OK, j'ouvre les vannes !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] cottesloe le 18 February 2022 à 08:30
C'est reparti ! :hyperbon: :hyperbon: :hyperbon:

Super !
Bonne nouvelle !  :jap:

 :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: PhilTheNet le 21 February 2022 à 10:31
Première UT et premier plantage:
21/02/2022 10:25:32 | QuChemPedIA@home | Output file cl9_athome_b3lyp-321gd,batch123,001239982,nwchem,1632297729_4_r1030667066_1 for task cl9_athome_b3lyp-321gd,batch123,001239982,nwchem,1632297729_4 absent

 :electric:

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 21 February 2022 à 18:51
Peu d'erreurs pour moi !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: PhilTheNet le 21 February 2022 à 21:00
54 UTs => 54 erreurs

 :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 21 February 2022 à 21:12
SI tu es sur Linux, tu n'aurais pas le même problème de Jean-Luc qu'il a eu une fois :

https://forum.boinc-af.org/index.php/topic,7838.msg524083.html#msg524083

Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 21 February 2022 à 22:48
Bien vu Kali !
C'est peut-être ça, je n'y avais pas pensé.
Si ça plante très vite, ce doit être ça...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 22 February 2022 à 14:33
ce  bug est vraiment pénible  :priz2tet:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 22 February 2022 à 19:24
@PhilTheNet : finalement, c'était le même bug que moi ?
Tu réussis maintenant à cruncher pour QuChemPedIA ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: PhilTheNet le 22 February 2022 à 19:49
Non je suis allé faire un tour sur WSL / LHC  :gno:

Quitte à revenir plus tard =>

Edit: j'ai effectué 3 UTs cette nuit sur WSL et elles sont en attente de validation

 :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 23 February 2022 à 09:24
Excellent !
Tu peux maintenant cruncher sur QChemPedIA si trois UTs sont passées !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: PhilTheNet le 23 February 2022 à 09:33
Pas exactement elles sont en "Terminé, validation peu concluante"

 :??:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 23 February 2022 à 11:06
Il ne faut pas s'affoler de cela, damotbe disait que ça faisait parti des résultats "normaux", c'est à dire que le résultat "peu concluant" est un résultat en soit.

Keep crunching !

:hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 23 February 2022 à 11:29
La plupart des peu concluantes finissent par se valider me semble-t-il.
Tu verras bien.
Cela dépend aussi si elles sont passées en peu concluantes au bout de 1 ou 2 minutes de calcul ou au bout de 1 ou 2 heures.
Si c'est une ou 2 minutes, il peut encore y avoir un souci.
Sinon, ça devrait être bon.
Mais je te conseille d'en laisser tourner quelques dizaines pour voir.
A mon avis, ça va turbiner.

Plus que 322000 WUs pour finir cette série !!!
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: PhilTheNet le 24 February 2022 à 05:57
Sur WSL/Ubuntu:
État: Tous (10) · En cours (1) · Validation en attente (0) · Validation non concluante (2) · Valide (5) · Invalide (2) · Erreur (0)

Je laisse tourner

 :kookoo:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 07 March 2022 à 10:09
En passant sur le forum de SG, je viens de découvrir un challenge sur QuChem
https://www.boincstats.com/stats/challenge/team/chat/1102

Comme d'hab, l'AF est inscrite d'office. Il reste encore 4 jours de challenge...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 29 March 2022 à 19:30
Coucou,

Voici une présentation (en anglais) qui présente nos différents travaux. C'est à destination d'autres chercheurs, mais comme d'habitude Thomas fait de grands efforts de vulgarisation.

Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 29 March 2022 à 19:57
La même vidéo en français est-elle prévu ?

Kali.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 30 March 2022 à 07:35
La même vidéo en français est-elle prévu ?

Kali.

Malheureusement non.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 30 March 2022 à 10:19
Oui effectivement c'est pour un public très averti (qui en vaut deux)...

Et quand vous faites ce type de vidéo vous la promouvez sur des supports spécialisés / scientifiques, pour que les chercheurs sachent qu'elle existe ? ou le chercheur doit chercher (sur youtube) au ptit bonheur ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 31 March 2022 à 11:09
Oui effectivement c'est pour un public très averti (qui en vaut deux)...

Et quand vous faites ce type de vidéo vous la promouvez sur des supports spécialisés / scientifiques, pour que les chercheurs sachent qu'elle existe ? ou le chercheur doit chercher (sur youtube) au ptit bonheur ?

On a été invité pour faire cette présentation (qui était diffusé en direct). Il y a donc déjà un réseau de chercheurs. Ensuite, ce réseau rend nos travaux visible, ce qui n'empêche pas quelqu'un de chercher sur Youtube et de tomber dessus.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 31 March 2022 à 11:20
Viva la ciencia :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 31 March 2022 à 13:50
Article publié sur la page Facebook de l'AF : https://www.facebook.com/permalink.php?story_fbid=4981609401954063&id=334052630043120

Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 31 March 2022 à 14:17
Tu parles d'un autre article que ce qui est évoqué plus haut ? dans ce cas nous autres les non-facebookiens on veut bien soit un lien (si l'article est hébergé ailleurs) soit le texte :jap:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 31 March 2022 à 14:28
Tu parles d'un autre article que ce qui est évoqué plus haut ? dans ce cas nous autres les non-facebookiens on veut bien soit un lien (si l'article est hébergé ailleurs) soit le texte :jap:

J'évoque la vidéo qui vient d’être publiée.

Les articles sur le page Facebook de l'AF sont publics. Pas besoin d'avoir un compte Facebook pour les lire.

Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 05 April 2022 à 16:44
Mmm j'ai décidé de recommencer à cruncher sur le Mac (un peu / une seule tâche à la fois) sur QCPIA et ça commence pas fort (https://quchempedia.univ-angers.fr/athome/results.php?hostid=5507)  : une tâche en erreur de calcul au bout de 20secs et les autres en "valider l'erreur" au bout de 1mn (dont 10 secs de CPU).....
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 05 April 2022 à 17:44
Mmm j'ai décidé de recommencer à cruncher sur le Mac (un peu / une seule tâche à la fois) sur QCPIA et ça commence pas fort (https://quchempedia.univ-angers.fr/athome/results.php?hostid=5507)  : une tâche en erreur de calcul au bout de 20secs et les autres en "valider l'erreur" au bout de 1mn (dont 10 secs de CPU).....
J'ai voulu faire de mème et j'ai donc installé Virtualbox,mais..... :??:
Citer
Virtualisation    Aucun(e)
Système d'exploitation    Darwin
20.6.0

Que faut-il faire pour activé la virtualisation sur macbook ?
Merci.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 05 April 2022 à 19:06
Heu... relancer boinc ? rebooter ?

Moi j'ai jamais rien eu de spécial à faire, boinc se demmerde tout seul du moment que VB est installé... après de (lointaine) mémoire il y a eu (dans un lointain passé) certaines versions de VB qui posaient problème (= le wrapper de berkeley le reconnaissait plus ?) et il fallait downgrader VB le temps que boinc mette à jour son code...

Mais a priori j'ai justement remis à jour VB avec la dernière version dispo avant de lancer mon test QCPIA, et il le reconnait.

Ca dépend peut-être aussi de ta version de macOS ?

Mais le message que tu montres, il sort d'où ? du journal de boinc ? de VB lui même ? du log de la tâche ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 05 April 2022 à 19:40
rebooter ?
La bonne nouvelle c’était bien ça,il fallait juste rebooter.  :D
Citer
Virtualisation    Virtualbox (6.1.32r149290) installé, le processeur est compatible avec la virtualisation matérielle et est activé
La mauvaise c'est tout part en erreur.  :cry:
Citer
   5 Apr 2022, 17:34:17 UTC    5 Apr 2022, 17:36:16 UTC    Erreur lors des calculs    9.09    0.00    ---    NWChem v0.11 (vbox64_t1)
x86_64-apple-darwin


Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 05 April 2022 à 21:08
Ne perdez pas votre temps sur Windows ça ne marchera pas bien.

C'est un projet Linux et il n'y a que sur cette plateforme que vous n'aurez pas de problème.

Personnellement, si vous êtes sur Windows, il vaut mieux se créer une VM Linux et installer Boinc dessus et là QuChemPedIA marchera très bien.

Cordialement,
Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 06 April 2022 à 07:48
 :plusun:

Testé et approuvé, j'ai d'ailleurs assez peu de pertes de performances entre un Linux sous VM et un Ubuntu natif.

 :hello:
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: fzs600 le 06 April 2022 à 09:05
Ne perdez pas votre temps sur Windows ça ne marchera pas bien.

C'est un projet Linux et il n'y a que sur cette plateforme que vous n'aurez pas de problème.

Personnellement, si vous êtes sur Windows, il vaut mieux se créer une VM Linux et installer Boinc dessus et là QuChemPedIA marchera très bien.

Cordialement,
Kali.
C'est une application mac.
Je test et je m'amuse.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 06 April 2022 à 11:57
En fait ni l'un ni l'autre, c'est une application qui a d'abord été faite pour fonctionner sous tous les OS (c'est l'intérêt théorique) à travers une VM VB linux (donc il n'y avait pas "d'appli boinc linux" mais "une appli scientifique linux"), et face à tous les soucis qu'ils avaient avec cette appli "VM boinc VB", le dev a porté "une appli linux native" sans VB (et elle a été déployée) mais le dev était un stagiaire et il est parti sans jamais avoir eu le temps de faire la même chose pour les autres OS comme ça avait été envisagé (damotbe me corrigera si je raconte rien que des conneries).

Mais oui du coup aujourd'hui le plus simple est de la faire tourner cette appli "boinc linux natif" via une VM linux où on lance boinc...

Moi sur le mac une seule tâche a été validée, 4 autres sont maintenant invalides... et ma VM linux est déjà utilisée pour autre chose. Je verrai.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 07 April 2022 à 10:25
oui, ça résume bien... Du coup, je conseille également d'installer une VM linux et de faire tourner Boinc et le projet dedans.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 07 April 2022 à 19:12
Bon j'ai voulu faire tourner dans ma VM linux : toutes les tâches (https://quchempedia.univ-angers.fr/athome/results.php?hostid=7520) terminent en 0 et 1.3 secondes de calcul... ??

Et elles ont l'air contentes ??

Citer
<core_client_version>7.16.16</core_client_version>
<![CDATA[
<stderr_txt>
19:06:49 (186272): wrapper (7.5.26014): starting
19:06:49 (186272): wrapper: running worker.sh ()
Jobs starts with 1 cores
STEP OPT : Starting
Create output archive
OPT.out
Normal termination.
19:06:51 (186272): worker.sh exited; CPU time 1.265510
19:06:51 (186272): called boinc_finish(0)

</stderr_txt>
]]>

Normal ? je laisse tourner ? (j'ai stoppé pour le moment)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 07 April 2022 à 19:37
non faut stopper ça rapidement ! C'est le problème connu, il faut appliquer la correction proposée par Sebastien

Je confirme que le problème ne provient pas de BSF mais d'une sécurité accrue dans systemd.
Pour corriger le problème, il faut éditer le fichier /lib/systemd/system/boinc-client.service et modifier la ligne ProtectSystem :

Arrêt du client BOINC
sudo systemctl stop boinc-client

Edition du fichier boinc-client.service => ProtectSystem=full au lieu de ProtectSystem=strict
sudo sed -i 's/ProtectSystem=strict/ProtectSystem=full/g' /lib/systemd/system/boinc-client.service

MAJ du daemon
sudo systemctl daemon-reload

Démarrage du client BOINC
sudo systemctl start boinc-client
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 07 April 2022 à 22:21
Super merci Benoit ça fonctionne !!

Au début c'était bizarre il a téléchargé 12 tâches (j'ai 10 threads sur la VM) et en a démarré que 3 en laissant les autres en attente... et finalement il s'est décidé à lancer les 7 autres, ça tourne gentiment et ça consomme bien tout le CPU dispo :)

A suivre !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 08 April 2022 à 08:28
Super merci Benoit ça fonctionne !!

Au début c'était bizarre il a téléchargé 12 tâches (j'ai 10 threads sur la VM) et en a démarré que 3 en laissant les autres en attente... et finalement il s'est décidé à lancer les 7 autres, ça tourne gentiment et ça consomme bien tout le CPU dispo :)

A suivre !

 :oki:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 08 April 2022 à 14:00
J'ai laissé les quelques tâches déjà débutées sur le Mac : je sais que y'en a une qui tourne depuis plus de 24h (vue hier soir), j'ai pas eu le temps de regarder ce matin avant de partir si elle était encore là pour la killer, je suppose que c'est pas normal - à mon avis elle tourne toujours car sur mon compte je vois toujours 3 tâches en cours.

Sur la VM linux j'en ai déjà 23 valides :) en revanche j'en ai aussi 24 invalides :(

La plupart (https://quchempedia.univ-angers.fr/athome/results.php?hostid=7520&offset=0&show_names=0&state=5&appid=) n'ont tourné que quelques secondes, donc c'est pas grave du tout, mais y'en a quand même une (https://quchempedia.univ-angers.fr/athome/result.php?resultid=10459535) qui a tourné plus de 3h avant de finir au statut "Terminé, validation impossible", et dans le détail de la tâche ça dit "Erreur d'unité de travail (WU) - contrôle abandonné", donc pas la tâche qui elle est au statut "succès" mais la WU (https://quchempedia.univ-angers.fr/athome/workunit.php?wuid=3347320) qui elle a un compteur d'erreur à "Trop de résultats totaux".

Bizarre - et trop injuste.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 08 April 2022 à 16:49
ça fait partie du projet. On explore les limites de la stabilité chimique... 2 fois sur 3 ce n'est pas stable et parfois c'est tellement instable que les résultats sont divergents. C'est pour ça que les tâches donnent pas mal de points quand elle termine avec succès. Je n'ai pas réussi à trouver un score juste pour les tâches incorrectes et quand j'ai essayé, j'ai vite eu des abus  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 09 April 2022 à 12:11
Et pour la tâche qui en est maintenant à plus de 2 jours de calcul sur le Mac, je la laisse tourner ?
 
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 09 April 2022 à 20:50
Et pour la tâche qui en est maintenant à plus de 2 jours de calcul sur le Mac, je la laisse tourner ?
 


non celle-ci tu peux l'annuler  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 10 April 2022 à 12:15
Elle s'est annulée toute seule (https://quchempedia.univ-angers.fr/athome/result.php?resultid=10439826) cette nuit : 3j 9h de calcul, et erreur...  :cpopossib:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: zelandonii le 27 April 2022 à 20:33
Plus d'UT ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 28 April 2022 à 16:30
467982 NWChem ça devrait suffire non ? :)

En revanche les résultats de ma petite VM linux (https://quchempedia.univ-angers.fr/athome/results.php?hostid=7520) sont vraiment pas terribles :

État: Tous (219) · En cours (39) · Validation en attente (16) · Validation non concluante (50) · Valide (99) · Invalide (15) · Erreur (0)

:/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 28 April 2022 à 23:43
Je ne me souviens plus si l'appli linux a des points de reprise ou pas (en tous cas les propriétés de la tâche indiquent 0).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: zelandonii le 30 April 2022 à 07:58
J'ai atteins les 2M, j'arrête sur ce projet
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 30 April 2022 à 11:48
Je ne me souviens plus si l'appli linux a des points de reprise ou pas (en tous cas les propriétés de la tâche indiquent 0).
Ceci est une question en fait :)

J'ai atteins les 2M, j'arrête sur ce projet
C'est pas très très gentil :)


Damotbe je me demandais pourquoi les badges ils se cumulent et ils se remplacent pas ? (chacun garde les badges de plus bas niveau)
C'est un choix ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 30 April 2022 à 19:47
Je ne me souviens plus si l'appli linux a des points de reprise ou pas (en tous cas les propriétés de la tâche indiquent 0).
Ceci est une question en fait :)

Damotbe je me demandais pourquoi les badges ils se cumulent et ils se remplacent pas ? (chacun garde les badges de plus bas niveau)
C'est un choix ?

Oui, il y a des points de reprise, ceux prévus dans NWChem. Par contre, je ne les trouve pas assez rapprochés et efficaces. D'un autre côté, je ne peux pas faire mieux, alors...

Pour les badges, c'est un "choix" (le programme était plus simple à écrire)  :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 01 May 2022 à 14:03
Merci pour les réponses, en fait j'ai été béta quand on va voir les fichiers dans le slot de la tâche, il y en a un pour les points de reprises et on voit un compteur en seconde qui se met à jour dedans :)

C'est juste que comme c'était pénible à développer, ça n'est pas visible depuis le boinc manager / détails de la tâche :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 01 June 2022 à 17:16
Il se passe un truc bizarre :

Ma bécane a calculé toutes mes UTs QuChemPedIA et il n'en reste plus une seule sur ma machine d'après le BM.
Mais si je clique sur "Your tasks", le serveur du projet me dit que j'ai 709 UTs "En cours" !
Je ne sais pas où sont ces UTs ?
Pas sur ma bécane en tout cas !
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 01 June 2022 à 18:52
T'es sûr que t'as pas dit à ton BM de ne montrer "que les tâches actives", pas hasard ? (le bouton à gauche, là...)

(on sait jamais hein, je préfère demander :D)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 01 June 2022 à 19:07
Certain à 1000% !
Pas d'erreur de ma part sur ce coup-là !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 15 June 2022 à 21:26
Certain à 1000% !
Pas d'erreur de ma part sur ce coup-là !

c'est étrange... je n'ai pas le temps de regardé en ce moment  :pt1cable:
j'espère donc que la situation va évoluer favorablement  :lol:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 15 June 2022 à 22:06
(https://s2.qwant.com/thumbr/0x380/c/7/d43318983d9eefadf65966b8a45b5fe582e04565a3f728c7255a742ab1ebac/B9720097528Z.1_20190628150754_000%2BGQDDUVFKB.1-0.jpg?u=https%3A%2F%2Flvdneng.rosselcdn.net%2Fsites%2Fdefault%2Ffiles%2Fdpistyles_v2%2Fena_16_9_extra_big%2F2019%2F06%2F28%2Fnode_605835%2F40376839%2Fpublic%2F2019%2F06%2F28%2FB9720097528Z.1_20190628150754_000%252BGQDDUVFKB.1-0.jpg%3Fitok%3Dc8VmZQFY1561727334&q=0&b=1&p=0&a=0)
Titre: Re : Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 15 June 2022 à 22:29
Certain à 1000% !
Pas d'erreur de ma part sur ce coup-là !

c'est étrange... je n'ai pas le temps de regardé en ce moment  :pt1cable:
j'espère donc que la situation va évoluer favorablement  :lol:

J'ai laissé le temps que ces WUs disparaissent.
Quand tous les compteurs seront à 0, je reprendrai.
Il ne reste plus grand chose.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 15 June 2022 à 23:07
(https://s2.qwant.com/thumbr/0x380/c/7/d43318983d9eefadf65966b8a45b5fe582e04565a3f728c7255a742ab1ebac/B9720097528Z.1_20190628150754_000%2BGQDDUVFKB.1-0.jpg?u=https%3A%2F%2Flvdneng.rosselcdn.net%2Fsites%2Fdefault%2Ffiles%2Fdpistyles_v2%2Fena_16_9_extra_big%2F2019%2F06%2F28%2Fnode_605835%2F40376839%2Fpublic%2F2019%2F06%2F28%2FB9720097528Z.1_20190628150754_000%252BGQDDUVFKB.1-0.jpg%3Fitok%3Dc8VmZQFY1561727334&q=0&b=1&p=0&a=0)
[HS] Pas besoin d'attendre août 2050, c'est pratiquement la carte des prévisions pour samedi qui vient (https://smilies.4-user.de/include/Sommer-Smileys/smileys-sommer-5.gif) (https://smilies.4-user.de) [/HS]
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Libristes] Dudumomo le 16 June 2022 à 02:12
J'adore le microclimat breton :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 16 June 2022 à 09:23
(https://s2.qwant.com/thumbr/0x380/c/7/d43318983d9eefadf65966b8a45b5fe582e04565a3f728c7255a742ab1ebac/B9720097528Z.1_20190628150754_000%2BGQDDUVFKB.1-0.jpg?u=https%3A%2F%2Flvdneng.rosselcdn.net%2Fsites%2Fdefault%2Ffiles%2Fdpistyles_v2%2Fena_16_9_extra_big%2F2019%2F06%2F28%2Fnode_605835%2F40376839%2Fpublic%2F2019%2F06%2F28%2FB9720097528Z.1_20190628150754_000%252BGQDDUVFKB.1-0.jpg%3Fitok%3Dc8VmZQFY1561727334&q=0&b=1&p=0&a=0)
[HS] Pas besoin d'attendre août 2050, c'est pratiquement la carte des prévisions pour samedi qui vient (https://smilies.4-user.de/include/Sommer-Smileys/smileys-sommer-5.gif) (https://smilies.4-user.de) [/HS]

Sinon y'a celle-là aussi
(https://s1.dmcdn.net/v/fSUW1Nq8VwyldDM3/x240)

Mais on est un peu hors sujet il est vrai :D
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 13 August 2022 à 12:07
Ça calcule, ça valide mais aucun crédit!..
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 14 August 2022 à 19:56
Ça calcule, ça valide mais aucun crédit!..

 :kookoo:

Je vois 2 tâches terminées, dont 2 en "valider l'erreur" (donc invalide). Ce n'est surement juste pas de chance... faudrait plus de tâches terminées pour voir si ça persiste.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 16 August 2022 à 17:26
Je vois le "trickle_credit_vm" suspendu...
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 16 August 2022 à 19:58
Je vois le "trickle_credit_vm" suspendu...

C'est l'ancien système de points. J'ai eu des abus avec le système "Trickle", il est donc désactivé, mais l'autre système tourne bien
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 18 August 2022 à 09:58
Ok, mais 3/4 en erreur...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 20 August 2022 à 08:12
Comment faire pour que VB et les tâches associées ne se mettent pas en pause?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 20 August 2022 à 19:37
Comment faire pour que VB et les tâches associées ne se mettent pas en pause?

Je ne sais pas, c'est un problème récurrent... Je n'ai pas la mai la-dessus, j'utilise le wrapper VB officiel
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 20 August 2022 à 20:31
Même si t'en laisse tourner une seule à la fois ça se met en pause ?

(c'est pas la vrai pause, c'est le statut bizarre dont j'oublie le nom qui ne concerne que des applis VB).
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 21 August 2022 à 07:56
oui. Je viens de suspendre Denis, et c'est reparti. Je comprends pas pourquoi...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 23 August 2022 à 08:30
Elles finissent toutes en invalide...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 25 August 2022 à 10:45
25/08/2022 09:57:05 | QuChemPedIA@home | Task cl9_athome_b3lyp-321gd,batch127,001274005,nwchem,1656540537_3 postponed for 86400 seconds: VM job unmanageable, restarting later.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 25 August 2022 à 14:12
Si tu as besoin de rester sous windows sur ton PC, il faut vraiment que tu te mettes une petite VM linux dedans (qui utilise un % de tes cores, et tu laisses le reste pour le boinc dans windows) pour faire tourner l'appli linux native... (et tu pourras en faire plusieurs en // normalement sans soucis)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 25 August 2022 à 15:07
WSL avec le tuto présent dans ce forum marche vraiment bien sous W10 !!! ;)

L'occupation mémoire et disque est plus faible, je n'ai pas noté de différences de performances CPU.

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 25 August 2022 à 18:30
Je dois virer VB?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 25 August 2022 à 20:30
WSL avec le tuto présent dans ce forum marche vraiment bien sous W10 !!! ;)

L'occupation mémoire et disque est plus faible, je n'ai pas noté de différences de performances CPU.

 :hello:
Tu parles de ce tuto là (https://forum.boinc-af.org/index.php/topic,8547.0.html) ?

Et ça tout pareil que ce que je cite ici (https://forum.boinc-af.org/index.php/topic,2179.msg530591.html#msg530591) ?

Je dois virer VB?
Ben si t'arrives à bien dérouler tout le tuto, je suppose que oui... mais je visualise pas bien comment le boinc manager va aller gentiment aller chercher des applis linux sur les projets, c'est comme si on était sous linux avec une instance de boinc dédiée différente de "celle dans le windows" ?

(sachant que j'ai pas lu le tuto et que je suis pas concerné donc c'est probablement normal que je visualise pas bien :siflotte: )
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 29 August 2022 à 13:41
Nouvelles Infos sur ce projet QuChemPedIA

Lien : https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=183 (http://Lien : https://quchempedia.univ-angers.fr/athome/forum_thread.php?id=183)
Citer
Chers cruncheurs,

Le projet a été développé il y a quelques années avec un stagiaire et un budget très limité. Malgré de nombreuses soumissions de projets, nous n'avons obtenu aucun financement. Parfois on nous dit que notre projet est trop ambitieux, parfois pas assez... C'est décourageant ! La vérité est que le financement public de la recherche en France est extrêmement faible.

Nos programmes prototypes sont obsolètes. Au début, j'ai eu du mal avec les machines virtuelles, puis des changements de sécurité dans le noyau Linux ont commencé à empêcher l'application de fonctionner correctement.

Malgré tout et grâce à vous (merci !), nous arrivons à la fin d'une campagne de calcul et l'intégration des données va me prendre beaucoup de temps. Le projet n'est évidemment pas terminé et nous pourrions encore soumettre de nombreux calculs. Mais aujourd'hui, la priorité est d'analyser et de valoriser ce que nous avons déjà. Je vais parcourir les derniers calculs qui ont posé problème et voir si je peux resoumettre certaines tâches, mais très bientôt il n'y aura plus de WU.

Nous avons fait beaucoup de progrès avec peu de financements, nous continuerons à partager avec vous nos publications scientifiques. D'ailleurs, nous terminons actuellement la rédaction d'un article et je peux déjà vous dire que nous avons développé un moyen de réduire fortement les calculs de molécules instables.

A bientôt
Bien cordialement,
Benoît

Cordialement,
Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF>Amis des Lapins] Jean-Luc le 30 August 2022 à 08:11
Merci pour ces informations !

 :jap:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 30 August 2022 à 10:56
Merci ! ça fait plaisir de savoir qu'on aide un peu à quelque chose ;)

Déprimant en effet la situation de la recherche dans ce pays... je dis pas que c'est brillant partout ailleurs hein... on peut trouver largement pire, mais on doit pouvoir trouver mieux !
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 30 August 2022 à 12:54
Merci ! ça fait plaisir de savoir qu'on aide un peu à quelque chose ;)

Déprimant en effet la situation de la recherche dans ce pays... je dis pas que c'est brillant partout ailleurs hein... on peut trouver largement pire, mais on doit pouvoir trouver mieux !

Il paraît que c'est la fin de l'abondance en plus  :rhaa:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 30 August 2022 à 16:10
Exact, bientôt les chercheurs vont devoir payer pour financer eux-mêmes leurs recherche, on envisage de faire ça via des saisies sur salaire.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 30 August 2022 à 18:19
Sauf que Napoléon est toujours idolâtré en France (et ailleurs) 200 ans plus tard... après 1 million de morts en France et 2 millions en Europe en une petite 15aine d'années, grâce à ses bonnes idées de guerres (source (https://www.napoleon.org/histoire-des-2-empires/articles/point-dhistoire-bilan-humain-des-guerres-napoleoniennes/#:~:text=Le%20nombre%20de%20900%20000,%25%20des%20pertes%20(4).) quelque peu documentée, si j'ai bien compris il ne s'agit que de pertes militaires).

Donc Macron a toujours ses chances :)


PS : pour Jupiter je me prononce pas :siflotte:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 08 September 2022 à 21:26
Un message pour damotbe :

J'envoie tous mes encouragements à ce (ces) projet(s) de recherche, il est si difficile de le(s) faire vivre, tant en termes de moyens financiers, humains ou d'énergie nécessaire. J'espère que les calculs via BOINC auront fait avancer les connaissances sur ce domaine, c'est bien le but de notre démarche sur ce forum. Que la pause soit prolifique et qu'elle ne dure pas éternellement !  :hyperbon:

Dans tous les cas, merci à toi (vous) d'avoir lancé un projet en France, c'est assez rare pour être souligné  :jap:

J'ai passé les 5M de points de justesse avant la pause et je serai prêt lors du re-démarrage  :chefouichef:

Amitiés,
Fansyl
 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 08 September 2022 à 21:54
Un message de toi ou tu transmets ?
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 16 September 2022 à 20:57
Merci pour votre soutien.

Oui, on a beaucoup progressé mais pour continuer il nous faut des moyens. On demande pas grand chose, quelques stagiaires aideraient beaucoup !

 :hello:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 18 September 2022 à 16:28
Mais pour avoir des stagiaires il vous faut un (petit) budget que vous n'avez pas ?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 26 September 2022 à 22:53
Mais pour avoir des stagiaires il vous faut un (petit) budget que vous n'avez pas ?

Oui, on doit rétribuer les stagiaires (environ 500€/mois et c'est déjà pas grand chose)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: RLDF le 27 September 2022 à 08:19
Bonjour,

suite aux nouvelles directives de la présidence de l'université d'Angers, il a été demandé aux services informatiques de faire baisser la note d'électricité.
De mon côté, tous les boinc sont à l'arrêt, je pense que damotbe a reçu les mêmes infos et est tombés sur les mêmes conclusions que moi.
https://www.ouest-france.fr/pays-de-la-loire/angers-49000/l-universite-d-angers-plombee-par-sa-facture-d-electricite-c591d8fe-38ea-11ed-8b3d-3215396223a4 (https://www.ouest-france.fr/pays-de-la-loire/angers-49000/l-universite-d-angers-plombee-par-sa-facture-d-electricite-c591d8fe-38ea-11ed-8b3d-3215396223a4)
Autres mesures, pas plus de 18°C dans les bureaux à partir du 1er novembre, date de mise en route du chauffage en espérant qu'il ne fera pas plus froid d'ici là, déjà 17°C dans mon bureau hier matin...
L'université clame haut et fort qu'elle ne fera pas comme celle de Strasbourg qui fermera 2 semaines, mais cela va pousser les agents à faire du télétravail quand même pour avoir de meilleures conditions de travail et ne pas trouver des secrétaires de scolarité grelottant avec col roulé et parka sur le dos.
Je ne parle même pas des étudiants en amphis et salles de cours qui devront également se couvrir. C'est du grand n'importe quoi.
Pendant la crise sanitaire, nos impôts ont servis à subventionner les entreprises privées et là, pas un centime de plus pour compenser les augmentations des factures d'énergie des établissement publics, deux poids, deux mesures...

Bonne journée  :cpopossib:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 27 September 2022 à 08:39
Que veux-tu c'est ça la mondialisation...
Mais là, ce n'est pas le sujet, je m'écarte...
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 27 September 2022 à 08:57
[HS]
Autres mesures, pas plus de 18°C dans les bureaux à partir du 1er novembre, date de mise en route du chauffage en espérant qu'il ne fera pas plus froid d'ici là, déjà 17°C dans mon bureau hier matin...
L'université clame haut et fort qu'elle ne fera pas comme celle de Strasbourg qui fermera 2 semaines, mais cela va pousser les agents à faire du télétravail quand même pour avoir de meilleures conditions de travail et ne pas trouver des secrétaires de scolarité grelottant avec col roulé et parka sur le dos.
Je ne parle même pas des étudiants en amphis et salles de cours qui devront également se couvrir. C'est du grand n'importe quoi.
J'aimerais bien voir les députés débattre pendant une journée dans une assemblée chauffée à 18 ou 19°C. Ils arrêteraient peut-être de préconiser des conneries.
EDF aussi m'a envoyé un mail avec ça dans les recommandations. S'ils n'avaient pas installé des chauffages électriques partout depuis les années 70 (et continuent à le faire), il y aurait probablement moins de problèmes. Je n'ose même pas imaginer ce que sera le réseau électrique quand tout le monde sera équipé en véhicule électrique :cpopossib:

Pendant la crise sanitaire, nos impôts ont servis à subventionner les entreprises privées et là, pas un centime de plus pour compenser les augmentations des factures d'énergie des établissement publics, deux poids, deux mesures...
Je suis d'accord, même si j'ai pu profiter à mon petit niveau des aides Covid. Ce n'est pas une raison pour laisser tomber les établissements et services publics.
[/HS]
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Oncle Bob le 27 September 2022 à 11:24
T'es de l'univ d'Angers RLDF ? :o
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 27 September 2022 à 11:45
La solution :

(https://m.media-amazon.com/images/I/61DEUcl1b8L._AC_SL1500_.jpg)

Regardez comme elle peu vêtue : elle n'a pas peur du froid.
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 29 September 2022 à 08:49
Bonjour,

suite aux nouvelles directives de la présidence de l'université d'Angers, il a été demandé aux services informatiques de faire baisser la note d'électricité.
De mon côté, tous les boinc sont à l'arrêt, je pense que damotbe a reçu les mêmes infos et est tombés sur les mêmes conclusions que moi.
https://www.ouest-france.fr/pays-de-la-loire/angers-49000/l-universite-d-angers-plombee-par-sa-facture-d-electricite-c591d8fe-38ea-11ed-8b3d-3215396223a4 (https://www.ouest-france.fr/pays-de-la-loire/angers-49000/l-universite-d-angers-plombee-par-sa-facture-d-electricite-c591d8fe-38ea-11ed-8b3d-3215396223a4)
Autres mesures, pas plus de 18°C dans les bureaux à partir du 1er novembre, date de mise en route du chauffage en espérant qu'il ne fera pas plus froid d'ici là, déjà 17°C dans mon bureau hier matin...
L'université clame haut et fort qu'elle ne fera pas comme celle de Strasbourg qui fermera 2 semaines, mais cela va pousser les agents à faire du télétravail quand même pour avoir de meilleures conditions de travail et ne pas trouver des secrétaires de scolarité grelottant avec col roulé et parka sur le dos.
Je ne parle même pas des étudiants en amphis et salles de cours qui devront également se couvrir. C'est du grand n'importe quoi.
Pendant la crise sanitaire, nos impôts ont servis à subventionner les entreprises privées et là, pas un centime de plus pour compenser les augmentations des factures d'énergie des établissement publics, deux poids, deux mesures...

Bonne journée  :cpopossib:

Bonjour,

J'ai lu les news, mais je n'ai pas eu de recommandation pour le calcul scientifique. Je vais en parler avec l'équipe. La dernière fois qu'on avait discuté de ça on était arrivé à la conclusion que de toutes façons les machines étaient allumées et calculaient pour des projets de recherche de l'UA et que le fait d'ajouter les clients BOINC ne représentait pas une sur-consommation significative puisque on récupère les miettes. Évidemment, on ne lance plus rien sur les machines de TP/bureau. Depuis le déménagement des serveurs dans le datacenter on a peut-être des mesures plus pertinentes de consommation, je vais demander aux personnes concernées.

On est bien d'accord sur le fond... et autant aussi le dire, l'augmentation du point d'indice (3,5% et donc très inférieure à l'inflation) n'a même pas été ajoutée au budget de l'Université. Dit autrement, les salaires vont augmenter mais l'Université doit se débrouiller pour payer avec ce qu'elle a (pas assez de base)...   :priz2tet:
Les conditions de travail se dégrade à vue d’œil, notre système va droit dans le mur  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 29 September 2022 à 16:54
L'immigration, seule solution, pars aux Amériques (https://france-science.com/analyse-du-budget-federal-2021-pour-la-recherche-en-energie-environnement-et-climat/#:~:text=45%2C5%20milliards%20de%20dollars,infrastructures%20de%20recherche%20et%20d%C3%A9veloppement.)... :spamafote:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: modesti le 29 September 2022 à 22:53
Tu veux dire l'émigration, Jéjé? ;)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 04 October 2022 à 21:59
Ou la migration, tout dépend sur quelle chaise tu es assis... :)
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: Antares le 10 July 2023 à 18:11
Alors des nouvelles?
Titre: Re : Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] Kalianthys le 10 July 2023 à 18:37
Alors des nouvelles?

De que j'ai compris. Le projet Boinc QuChemPedIA tel que nous le connaissions ne redémarrera pas.  :(
La recherche à l'université d'Anger se poursuivra sous une autre forme.

Kali.
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 10 July 2023 à 22:43
Damotbe avait écrit ça en mars dans le topic du RAID

Citer
Citation de: [AF] Kalianthys le 11 March 2023 à 17:11

    Salut Benoit,

    Question hors-sujet : est-ce Quchempedia va reprendre bientôt ?

    Kali.

Citer
Non, on n'a plus de budget pour le moment et ce n'est plus une priorité recherche. Actuellement, on travaille sur des méthodes d'IA et on monte un projet pour aller de la conception jusqu'à la fabrication d'une dispositif photovoltaïque prédit par l'IA. On ne pourra pas se permettre de dépendre de BOINC pour ça, ce serait trop de travail et trop de risques.

La rude vie des projets boinc :spamafote:
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: damotbe le 25 July 2023 à 09:07
Bonjour, :kookoo:

ce n'est pas l'envie qui nous manque, mais encore une fois, sans budget c'est compliqué. Notre projet s'est encore fait refusé... On avait une nouvelle méthode de calcul et probablement beaucoup de calcul à réaliser, mais ce ne sera pas encore pour cette fois  :/
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: JeromeC le 25 July 2023 à 09:39
:/

Mais merci pour les news et bon courage de toutes façons !!
Titre: Re : [QuChemPedIA] le topic de préparation
Posté par: [AF] fansyl le 25 July 2023 à 09:56
Citer
Non, on n'a plus de budget pour le moment et ce n'est plus une priorité recherche. Actuellement, on travaille sur des méthodes d'IA et on monte un projet pour aller de la conception jusqu'à la fabrication d'une dispositif photovoltaïque prédit par l'IA. On ne pourra pas se permettre de dépendre de BOINC pour ça, ce serait trop de travail et trop de risques.

Des choses qui ressemblent au Clean Energy Project qui avait eut lieu sur le WCG ?
https://en.wikipedia.org/wiki/Clean_Energy_Project
https://fr.wikipedia.org/wiki/World_Community_Grid#The_Clean_Energy_Project_-_Phase_1
https://fr.wikipedia.org/wiki/World_Community_Grid#The_Clean_Energy_Project_-_Phase_2

Il y a un accès à leur database : https://www.molecularspace.org/cleanenergy_subdomain/index/

 :hello: