Portail de l'AF

Nouvelles

Projet du Mois FB: World Community Grid

Faites un don

Shoutbox

zelandonii:
2024-10-01, 16:43:16
Bien-sûr, ils se couvrent et c'est compréhensible. Pour information, un utilisateur d'un autre forum où je suis inscrit à fait comme moi, et aucun problème non plus.
JeromeC:
2024-10-01, 12:20:16
J'ai lu leur FAQ et ils avaient l'air d'insister là dessus et qu'on pouvait pas se plaindre que ça marche pas si on l'avait pas fait, mais ils ne disaient pas l'inverse non plus donc...
zelandonii:
2024-09-30, 20:41:20
Alors pour avoir testé sur un portable équipé d'un I5 6200U à 2,3GHz, l'installation s'est parfaitement déroulée sans avoir eu besoin de réinstaller W. J'ai seulement mis à jour ce dernier et fait l'upgrade par dessus. Et aucun souci.
fa__:
2024-09-30, 19:18:07
J'ai testé dans une VM assez fraiche mais pas juste après installation, ca n'a pas refusé de s'installer
JeromeC:
2024-09-30, 18:04:30
Oui j'ai lu leur site et leur faq, en fait c'est un machine qui s'installe par dessus et vire le plus de trucs posible, mais vu qu'il faut faire une réinstall de windows pour pouvoir installer le truc, ça me tente moyen de tester...
Kao:
2024-09-30, 16:09:58
Globalement tant que ça ne contourne pas la licence Windows (et que tu dois donc toujours payer) MS s'en moque
Maeda:
2024-09-30, 13:43:11
zelandonii: en effet j'ai lu un peu vite, je dois avoir un filtre visuel sur "Windows" :siflotte:
JeromeC:
2024-09-30, 09:23:47
Mmm et votre antiX linux la page d'acceuil c'est "Proudly anti-fascist" mais à part ça c'est pas politisé :D
JeromeC:
2024-09-30, 09:19:12
Mmm un truc qui dit sur sa page d'acceuil "F**k Windows Upgrade to Atlas" et M$ va laisser faire tu crois ? + faudrait plutôt en parler dans un topic que ici...
zelandonii:
2024-09-30, 07:14:39
Je ne connaissais pas antiX. Mais attention, l'OS dont je parle est un Windows.
Maeda:
2024-09-29, 16:45:16
Non je ne connais pas, mais j'ai installé antiX (sans GUI) sur une machine avec 512Mo de RAM et mons de 4Go de disque, ça tourne :electric:
zelandonii:
2024-09-29, 15:41:30
Zut, j'ai oublié le nom Windows avant "modifié etc.". Pour ceux que ça intéresse. https://atlasos.net/
zelandonii:
2024-09-29, 15:40:11
En parlant de Linux, certains connaissent-ils AtlasOS ?C'est un modifié, nettoyé et allégé. Je l'ai installé sur le portable de ma femme, qui n'est pas une bête de course (je parle du portable, pas de ma femme  :D ), et on voit la différence.
modesti:
2024-09-29, 14:50:08
Bah oui, mais pendant une Linux  party on perd parfois la notion du temps ⌛  :D
JeromeC:
2024-09-29, 12:49:02
Hier à 19h il était déjà bien avancé le weekend...
[AF>Libristes] alain65:
2024-09-29, 03:26:01
prêt  :hello:
modesti:
2024-09-28, 19:10:23
:hello: Prêts pour le week-end ? :D
Kao:
2024-09-27, 15:10:59
Elle dure 5 ans et ça coûte moins cher que mon pc
Maurice Goulois:
2024-09-27, 14:51:01
anticipes le coût de remplacement des batteries :)
Kao:
2024-09-27, 10:38:41
Et quelques soucis de PC aussi. Maintenant j'ai un onduleur, j'espère que c'est la solution. Ça rendrait les choses plus simples.
Kao:
2024-09-27, 10:37:51
Eh oui Jérôme, "petite" absence
JeromeC:
2024-09-27, 10:07:42
Kao qui plope !? alors qu'il a plus écrit sur le fofo depuis avril 2023 ! Mais vas-y, sois pas timide, lance toi ! :)
Maurice Goulois:
2024-09-27, 09:48:19
y'avait le même sur Boincstats
Maurice Goulois:
2024-09-27, 09:47:31
mieux placé maintenant :)
Kao:
2024-09-27, 09:14:30
plop
JeromeC:
2024-09-26, 11:18:19
C'est un vieux gadget mais avant il était en bas :D
ousermaatre:
2024-09-25, 17:58:59
 :kookoo: maugou
Maurice Goulois:
2024-09-25, 08:08:22
je m'étais pas rendu compte de ce nouveau gadget, bonjour

Recent

PrimeGrid

Démarré par Heyoka, 26 Mars 2007 à 17:29

« précédent - suivant »

0 Membres et 1 Invité sur ce sujet

Maeda

OK donc à priori la rapidité de calcul et facteur chance. Soit. C'est noté :kookoo:.

[AF>Amis des Lapins] Jean-Luc

Citation de: zOU le 07 Février 2024 à 07:26
Pour ceux qui veulent optimiser a mort PG:

https://www.primegrid.com/forum_thread.php?id=10184#161176

Je resume;
1- désactiver l'hyper threading dans le BIOS pour ne laisser que des coeurs physiques dispo  :siflotte: :siflotte:
2- regarder la quantité de cache L3 de votre CPU sur chaque machine (cpu-z ou google)
3- regarder la quantité de cache utilisée par chaque projet/sous projet (FFT size) dans les pref PG
4- diviser la quantité de cache de votre CPU par la quantité de cache requise par le projet/sous-projet que vous avez choisi => vous obtenez le nb d'UT max calculables en // sur votre CPU
5- créez une profil de préférence PG pour cette machine et ce projet et appliquez le
6- recommencez pour chaque paire machine/projet different

Après plusieurs semaines d'essais divers et variés, je dois bien reconnaître qu'il y a un bug dans les explications ci-dessus.
En théorie, cela devrait marcher.

MAIS...

La théorie :

Ma cahce L3 est de 256 MB.
Or, Seventeen or Bust (SOB) doit consommer 33 Mega de cache par tâche.
256/33 = 7.75.
Donc en théorie, je devrais pouvoir faire tourner 7 tâches en parallèle de manière optimale.
Avec 126 threads (j'en garde deux pour gérer le GPU), je dois donc mettre 126/7 = 18 threads par tâche.

La réalité suite à mes essais :

Dès que je dépasse les 2 tâches simultanées au lieu de 7, tout ralentit très fortement : les temps de calcul doublent quasiment !
Ensuite, quand je fais tourner 2 tâches, que je mette 60 threads par tâche, 30 threads, 16 threads ou 12 threads par tâche, à très peu de choses près, il me faut 2 jours de calcul par tâche !
C'est complètement dingue !
Au final, je lance donc 2 tâches sur 12 threads chacune.
Cela fait autant de travail par jour que si je lançais les deux tâches sur 60 threads chacune (ou que si je lançais 7 tâches sur 18 threads chacune).
Et en prime, je lance NumberFields sur mes 100 threads restants, ce qui ne modifie pas mes temps de Calcul sur SOB.

En résumé :

Je n'ai pas réussi à obtenir plus de points par jour sur SOB quelle que soit la combinaison, à 20 000 points par jour près.
La combinaison optimale est 2 tâches sur 12 threads sur mon CPU.
Je fais ainsi environ 120 000 points par jour sur SOB.
En prime, je lance 100 threads sur NumberFields, ce qui ne change rien à mon score SOB et je fais 300 000 points par jour en plus sur ce deuxième projet.

Il aurait été dommage de lancer mes 7 tâches SOB en parallèle sur 18 threads chacune pour ne faire aussi que 120 000 points par jour sur SOB, mais 0 points sur NumberFields !

C'est pour cela que je passe des jours à chercher les combinaisons idéales.
Après tout ce travail, je peux maintenant laisser tourner quelques semaines ou mois  : tout est optimal !


Rédacteur d'un article sur BOINC, adresse :
http://www.astrocaw.eu/?p=605
Créateur d'un site actif de recherche sur les suites aliquotes :
http://www.aliquotes.com/

JeromeC

On admettra que c'est quand même un projet casse-bonbons. Ou alors il faut fermer les yeux et accepter de sous-utiliser sa/ses config.
A quoi bon prendre la vie au sérieux, puisque de toute façon nous n'en sortirons pas vivants ? (Alphonse Allais)


[AF>Amis des Lapins] Jean-Luc

Oui, il est casse-bonbons.
Mais là, j'ai justement trouvé le moyen de le faire tourner sans sous-utiliser ma config.
Mais quel boulot !


Rédacteur d'un article sur BOINC, adresse :
http://www.astrocaw.eu/?p=605
Créateur d'un site actif de recherche sur les suites aliquotes :
http://www.aliquotes.com/

Maeda

C'est important de connaître le nombre de cache L3 par CPU physique (as-tu un seul CPU physique de 256MB de cache L3 et 128 cœurs HT désactivé donc :??:). Le fait que ça fonctionne avec deux tâches en parallèle et qu'ensuite cela ralentit est bizarre en effet ! Ça mériterait un petit post chez PG, tu ne dois pas être le seul à avoir ton matériel, il serait intéressant d'avoir quelqu'un d'autre avec ce CPU.

[AF>Amis des Lapins] Jean-Luc

Mon CPU est : AMD Ryzen™ Threadripper™ 3990X
C'est là que je suis allé voir le cache L3 : https://www.amd.com/fr/support/downloads/drivers.html/processors/ryzen-threadripper/ryzen-threadripper-3000-series/amd-ryzen-threadripper-3990x.html
Mais est-ce que ça a un rapport avec l'hyperthreading ?
Je n'ai fait aucune manip pour ne laisser que les CPUs physiques dans le BIOS.
J'avais déjà essayé par le passé, je n'avais pas réussi à faire cela !

En fait, c'est vrai : il me manque l'étape 1 de la manipulation en 6 étapes de zOU !

:desole:


Rédacteur d'un article sur BOINC, adresse :
http://www.astrocaw.eu/?p=605
Créateur d'un site actif de recherche sur les suites aliquotes :
http://www.aliquotes.com/

Maeda

C'est important en effet.

Ton CPU est un 64 cœurs physiques et le CCD est de 8x 8 cœurs, donc tu as en réalité 8 CPU à 8 cœurs physiques, cela revient donc à 32MB de cache L3 par CPU (256MB total / 8CPU) [mon avis, à vérifier sur les Threadripper :??:]

Donc avec une app à 32MB de cache L3 (ex : SOB = 32768Ko = 32Mo), cela signifie une UT max par CPU, donc à fond :
-> 8 UT en parallèle
-> 8 threads par UT

Et donc HT désactivé ou 50% de CPU utilisé dans Boinc (+ script d'affinité CPU pour ne pas qu'il y ai de bougeotte).

[AF>Amis des Lapins] Jean-Luc

J'ai essayé 8 threads par UT avec 7 UT.
Je suis aussi performant avec 2 UTs à 12 threads, c'est-à-dire que je calcule autant d'UTs par jour des deux manières !!!
Qui peut m'expliquer une telle différence entre la théorie et la réalité ?


Rédacteur d'un article sur BOINC, adresse :
http://www.astrocaw.eu/?p=605
Créateur d'un site actif de recherche sur les suites aliquotes :
http://www.aliquotes.com/

[AF] Xenon

Citation de: [AF>Amis des Lapins] Jean-Luc le 23 Avril 2024 à 14:41
Mon CPU est : AMD Ryzen™ Threadripper™ 3990X
C'est là que je suis allé voir le cache L3 : https://www.amd.com/fr/support/downloads/drivers.html/processors/ryzen-threadripper/ryzen-threadripper-3000-series/amd-ryzen-threadripper-3990x.html
Mais est-ce que ça a un rapport avec l'hyperthreading ?
Je n'ai fait aucune manip pour ne laisser que les CPUs physiques dans le BIOS.
J'avais déjà essayé par le passé, je n'avais pas réussi à faire cela !

En fait, c'est vrai : il me manque l'étape 1 de la manipulation en 6 étapes de zOU !

:desole:

L'Hyperthreading (HT) est la technologie utilisée par Intel.
Pour AMD son équivalent se nomme SMT (Simultaneous multithreading)
Pour Primegrid on parle de multithreading (MT) et non d'hyperthreading ou de SMT. Cela revient à faire calculer uniquement les cores physiques et non les cœurs logiques, d'où les conseils de désactiver dans le BIOS le HT ou le SMT.

Attention désactiver dans BOINC 50% des processeurs sur un processeur en HT ou SMT ne désactive pas forcement les cores logiques, par exemple pour un procésseur en 128 threads cela revient à utiliser 64 threads qui peuvent être 64 threads pour 64 cores  (1 thread par core) ou 64 threds pour 32 cores (donc en HT ou SMT 2 thread par core).

[AF>Amis des Lapins] Jean-Luc

Merci pour toutes vos explications.
Je ferai d'autres tests.
Si cela devait fonctionner, je vous tiendrai au courant.

:jap:


Rédacteur d'un article sur BOINC, adresse :
http://www.astrocaw.eu/?p=605
Créateur d'un site actif de recherche sur les suites aliquotes :
http://www.aliquotes.com/

toTOW

Citation de: [AF>Amis des Lapins] Jean-Luc le 23 Avril 2024 à 14:41
Mon CPU est : AMD Ryzen™ Threadripper™ 3990X
C'est là que je suis allé voir le cache L3 : https://www.amd.com/fr/support/downloads/drivers.html/processors/ryzen-threadripper/ryzen-threadripper-3000-series/amd-ryzen-threadripper-3990x.html
Mais est-ce que ça a un rapport avec l'hyperthreading ?
Je n'ai fait aucune manip pour ne laisser que les CPUs physiques dans le BIOS.
J'avais déjà essayé par le passé, je n'avais pas réussi à faire cela !

En fait, c'est vrai : il me manque l'étape 1 de la manipulation en 6 étapes de zOU !

:desole:
Ton CPU est en réalité un assemblage de 4 CPUs plus petits (les CCD). Essaye en ne faisant tourner que 4 WU sur 32 threads en même temps (voire seulement 16 threads pour pas utiliser les cores logiques).

Et je te conseille aussi d'utiliser un outil (type Process Lasso) pour bloquer chaque unité sur un seul CCD pour éviter de devoir en permanence transférer le contenu du cache d'un CPU vers un autre et de perdre des cycles de calculs à faire ça
FAH-Addict, première source d'information francophone sur le projet Folding@Home.

[AF>Amis des Lapins] Jean-Luc

Citation de: toTOW le 26 Avril 2024 à 20:25
Ton CPU est en réalité un assemblage de 4 CPUs plus petits (les CCD). Essaye en ne faisant tourner que 4 WU sur 32 threads en même temps (voire seulement 16 threads pour pas utiliser les cores logiques).

J'ai déjà essayé tout cela  : ça ralentit les calculs !


Citation de: toTOW le 26 Avril 2024 à 20:25
Et je te conseille aussi d'utiliser un outil (type Process Lasso) pour bloquer chaque unité sur un seul CCD pour éviter de devoir en permanence transférer le contenu du cache d'un CPU vers un autre et de perdre des cycles de calculs à faire ça

Je suis sous Linux.

Merci à toi pour tes idées.


Rédacteur d'un article sur BOINC, adresse :
http://www.astrocaw.eu/?p=605
Créateur d'un site actif de recherche sur les suites aliquotes :
http://www.aliquotes.com/

Maeda

Pour Linux, j'ai ça en script d'affinité (je l'exécute à chaque boot via cron) :

#!/bin/bash
while : ; do
(pgrep _llr\|sllr2) | while read; do
taskset -a -pc 8-15,24-31 $REPLY
if read; then
taskset -a -pc 0-7,16-23 $REPLY
fi
done
sleep 50
done

Les chiffres des taskset sont à ajuster (pas plus de détails, il faut que je retrouve le thread sur PrimeGrid mais le deuxième taskset doit correspondre au premier CCD [j'en ai 2]). J'ai 32 threads (max cœurs logiques de mon CPU).

[AF>Amis des Lapins] Jean-Luc

Merci à vous, mais je dois bien reconnaître que tout ceci dépasse mes compétences.
Je ne pige franchement pas le contenu des lignes pour Linux !
Je procède empiriquement pour trouver une combinaison performante.
Le désavantage est que ça me prend parfois plusieurs jours pour faire les essais.
Surtout pour SOB, là, c'était le pire cas de figure.
L'avantage, c'est que je suis certain de trouver une combinaison qui fonctionne bien, car la pratique ne suit pas toujours la théorie.
Je vais laisser tourner comme cela pour le moment, car je vais avoir moins de temps pour faire des tests.

Cela explique aussi que j'ai un tel mal pour faire les raids, les sprints et tous ces trucs.
Une fois que j'ai passé des jours à trouver une combinaison entre projets qui fonctionne, je reste dessus quelques semaines, voire mois pour rentabiliser.


Rédacteur d'un article sur BOINC, adresse :
http://www.astrocaw.eu/?p=605
Créateur d'un site actif de recherche sur les suites aliquotes :
http://www.aliquotes.com/

Maeda

Note bien tes réglages une fois que les test sont concluants pour ne pas refaire ces (longs) tests :D.
Si tu veux te prendre le moins possible la tête (et que tu n'as pas de GPU qui tourne), coupe l'hyperthread dans le BIOS, ainsi pas besoin de script d'affinité et la théorie devrait être proche de la pratique sans faire trop de tests.

[AF>Amis des Lapins] Jean-Luc

Si, si, j'ai des GPUs qui tournent !
Et même deux sur la même machine.

Merci à vous pour votre aide !


Rédacteur d'un article sur BOINC, adresse :
http://www.astrocaw.eu/?p=605
Créateur d'un site actif de recherche sur les suites aliquotes :
http://www.aliquotes.com/

Antares

Ça veut dire quoi?
J'ai trouvé un truc?

"Chère chercheuse ou cher chercheur d'AP,

Nous vous félicitons ! Nos archives indiquent qu'un ordinateur enregistré par vos soins a trouvé une progression arithmétique unique de nombres premiers de longueur 20. Cet ordinateur est affecté au projet AP27. Comme les nombres premiers trouvés dans ce sous-projet ne sont pas assez grands pour être signalés dans la liste des 5000 premiers, votre séquence AP20 est visible immédiatement.

Unité de travail 1111354772 : 401228760432289081+336318668*23#*n pour n=0..19

Vous pouvez sélectionner la longueur minimale de l'AP pour laquelle vous souhaitez recevoir ces notifications dans vos préférences PrimeGrid.

Si vous avez des questions ou des préoccupations, n'hésitez pas à nous contacter et nous résoudrons certainement tous les problèmes.

Encore une fois, félicitations pour votre trouvaille ! Nous vous remercions de votre participation à PrimeGrid.

Je vous prie d'agréer, Madame, Monsieur, l'expression de mes salutations distinguées,
L'équipe PrimeGrid"

Traduit avec DeepL.com (version gratuite)
Quand le dernier arbre sera abattu, la dernière rivière empoisonnée, le dernier poisson capturé, alors le visage pâle réalisera que l'argent ne se mange pas.

Sitting Bull

                                            

[AF] Kalianthys

Ca veut dire que tu a trouvé un AP20 ( très courant d'en trouver avec le matériel d'aujourd'hui).

Bravo.



[AF>Amis des Lapins] Jean-Luc

Pour être précis, si cela t'intéresse, tu as trouvé 20 nombres premiers entre lesquels il y a exactement le même écart.

Le plus petit est :
401228760432289081.
Vient ensuite :
401228760432289081+336318668*23#*1
Puis :
401228760432289081+336318668*23#*2
...
...
...
Le plus grand est :
401228760432289081+336318668*23#*19

23# est une quantité qui vaut le produit de tous les nombres premiers de 2 à 23, c'est-à-dire que :
23# = 2*3*5*7*11*13*17*19*23

:kookoo:


Rédacteur d'un article sur BOINC, adresse :
http://www.astrocaw.eu/?p=605
Créateur d'un site actif de recherche sur les suites aliquotes :
http://www.aliquotes.com/

Antares

Trop compliqué pour mon cerveau qui n'est pas matheux... :cpopossib: :electric: :D

Laisser tourner sans chercher à comprendre...
Quand le dernier arbre sera abattu, la dernière rivière empoisonnée, le dernier poisson capturé, alors le visage pâle réalisera que l'argent ne se mange pas.

Sitting Bull

                                            

kasur

Citation de: [AF>Amis des Lapins] Jean-Luc le 11 Mai 2024 à 20:50
Pour être précis, si cela t'intéresse, tu as trouvé 20 nombres premiers entre lesquels il y a exactement le même écart.

Le plus petit est :
401228760432289081.
Vient ensuite :
401228760432289081+336318668*23#*1
Puis :
401228760432289081+336318668*23#*2
...
...
...
Le plus grand est :
401228760432289081+336318668*23#*19

23# est une quantité qui vaut le produit de tous les nombres premiers de 2 à 23, c'est-à-dire que :
23# = 2*3*5*7*11*13*17*19*23

:kookoo:

Toujours un plaisir de comprendre un peu ce qu'on fait  :jap:

et 194 SETI@home classic workunits (4 764 hours) :p

JeromeC

Dites les pros, en farfouillant sous linux sur le VPS OVH que j'utilise avec 4 threads AMD EPYC-Milan Processor [Family 25 Model 1 Stepping 1] (AMD EPYC-Milan (4) @ 2.295GHz) je découvre ceci

Caches (sum of all):     
  L1d:                   128 KiB (4 instances)
  L1i:                   128 KiB (4 instances)
  L2:                    2 MiB (4 instances)
  L3:                    128 MiB (4 instances)  :miam:

Est-ce que ça veut dire qu'au lieu de laisser une tâche 4t ça vaudrait le coup d'en faire 4 en parallèle ?
A quoi bon prendre la vie au sérieux, puisque de toute façon nous n'en sortirons pas vivants ? (Alphonse Allais)


Maeda

J'émets un gros doute sur le 128Mo de cache L3 pour un CPU ayant 4 threads, mais oui si tu veux optimiser en utilisant tout le cache L3, ça serait bien d'avoir 4 UT en parallèle, mais avec un thread et un processeur @2.3GHz, je doute que ce soit très rapide.

[AF>Amis des Lapins] Jean-Luc

j'essaierais déjà avec deux tâches !


Rédacteur d'un article sur BOINC, adresse :
http://www.astrocaw.eu/?p=605
Créateur d'un site actif de recherche sur les suites aliquotes :
http://www.aliquotes.com/

JeromeC

C'est un serveur pro (VPS) donc j'imagine que le setup / type de CPU n'a pas grand chose à à voir avec une machine perso ?

D'aileurs j'ai probablement "un bout d'un CPU beaucoup plus gros" (genre 128 threads ou quoi) mais la commande linux que j'ai utilisé ne sait que voir "le grand tout" ? j'ai ptet qu'un ptit bout de cache alloué aussi, si jamais ils peuvent / savent faire cela ?

Je vais voir si j'essaye 2 à la fois, mais bon, il finit quand le pentathlon déjà ?
A quoi bon prendre la vie au sérieux, puisque de toute façon nous n'en sortirons pas vivants ? (Alphonse Allais)