PG Turnaj 2019 - testy a nastavení

[RoKro]

Jednotka FFT 2560K byla za 22,75 hodin. Teď se počítá jednotka 2880K a zatím to vypadá na 25 hodin.
Ke konci kola se bude dát trochu optimalizovat výběrem jednotek.
Když předposlední jednotku odevzdám 24 hodin před koncem, bude vhodné odmítat jednotky s FFT 2880K, protože by se nestihly dopočítat.
Když předposlední jednotku odevzdám 27 hodin před koncem, bude vhodné odmítat jednotky s FFT 2560K, protože se za tu dobu dá spočítat jednotka s FFT 2880K, za kterou bude víc bodíků.
To jen takový tip. Úvahu ale musí každý soudruh udělat na základě jeho časů.

FFT konkrétní jednotky se vyčte ze souboru stderr.txt, ve woknech je v "C:\ProgramData\BOINC\slots\0" nebo jiné číslo slotu.

[Honza]

Jo, to dává smysl, také mě napadlo... svyžnější i7 8700K mi dělá za necelých 18 hodin, ale u pomalejších strojů je větší pravděpodobnost, že by to pomohlo.
Ono by to šlo propočítávát už během (kdo jede 24/7), protože když by bylo jasné, že se např. o 6 hodin nestihne, výběr dvou kratších by rozhodl.

Ve výsledku by to mohlo rozhodnout o pořadí, pokud by to jinak bylo těsné, viz například současný vláček u jednotlivců:
12 eLPeCKo Czech National Team 390 932.86
13 Honza Czech National Team 379 342.24
14 LookAS Czech National Team 378 898.25
15 killik Czech National Team 378 351.54

[RoKro]

18 hodin je krásný. Mně jede ta i7 8700K na 4,8 GHz všech 6 jader (to ukazuje HWMonitor), BM ukazuje, že se počítá na 4 jádrech. HT off.
Paměti G.Skill taky nemám úplný ořezávátka, jak to děláš, že máš tak krátký časy? Vyšší frekvenci jsem už nehrotil, aby nebyly nevalidní jednotky.

[Honza]

Takt základní, paměti 4x8GB, jedu na 5 threadů, aby zbylý byl pro grafiku, bez HT.
Ale teď když koukám do BM, v 17% je po necelých 5 hodinách a čas mi naopak leze nahoru.

Když zpětně koukám do job_log_www.primegrid.com.txt, tak doma:
63405.966314
64096.471394
64508.857922

V práci ale
89396.249365
87709.443405
...
62701.772743
62043.060274

Ono to s tím reportováním časů nebude tak easy.

[RoKro]

Hm, zajímavé.
Já mám paměti 2x8GB, jedou v dual channelu na 3200 MHz při CL14. Wokna ukazují, že z toho používají celkem asi 30%.
Tak možná zkusím na další jednotku přepsat app_config, aby se používalo 5 jader místo 4, ačkoliv dle Prime95 mi ta 4 jádra vycházela trošičku lépe. Ale realita může být jiná.
Nebo že by víc jader na nižší frekvenci líp pracovalo s pamětí a počítalo ve výsledku rychleji? Je to duchařina

[RoKro]

DOTAZ: Dá se u stažené jednotky zjistit FFT, ještě než se ta jednotka začne počítat?
Nové jednotky, dokud se nezačnou počítat, nejsou ve složce slots a nemohu se tedy podívat do stderr.txt na FFT.
Dá se to aspoň odhadout jinak? Třeba přímo z toho souboru jednotky, např. llrSOB_284837086, ve složce projects/www.primegrid.com? Třeba z té dvojice čísel ve třetím řádku? Nebo jinak?

[LookAS]

ano, jde to z té dvojice čísel ve třetím řádku, hrubým odhadem dle této tabulky, často se stane, že se to v reálu překrývá či o něco netrefí.
nezapomenout fft_size vydělit 1024 na převod na kilobyty.

Kód: Vybrat vše

+-------+----------+------------+------------+
| k     | fft_size | min        | max        |
+-------+----------+------------+------------+
| 21181 |  2097152 | 24,019,364 | 24,481,340 |
| 21181 |  2359296 | 24,481,868 | 26,999,828 |
| 21181 |  2457600 | 28,000,292 | 28,391,300 |
| 21181 |  2621440 | 28,391,804 | 30,333,692 |
| 21181 |  2949120 | 30,334,412 | 31,999,940 |

| 22699 |  2097152 | 24,080,230 | 24,375,214 |
| 22699 |  2359296 | 24,378,022 | 26,998,678 |
| 22699 |  2457600 | 28,000,342 | 28,268,182 |
| 22699 |  2621440 | 28,269,118 | 30,202,318 |
| 22699 |  2949120 | 30,203,542 | 31,998,718 |

| 24737 |  2097152 | 24,017,983 | 24,246,583 |
| 24737 |  2359296 | 24,252,823 | 26,999,791 |
| 24737 |  2457600 | 28,000,087 | 28,116,367 |
| 24737 |  2621440 | 28,116,487 | 30,040,471 |
| 24737 |  2949120 | 30,041,167 | 31,999,831 |

| 55459 |  2359296 | 24,000,106 | 25,679,746 |
| 55459 |  2457600 | 25,679,758 | 26,684,950 |
| 55459 |  2621440 | 26,685,274 | 28,513,138 |
| 55459 |  2949120 | 28,514,638 | 31,811,674 |
| 55459 |  3145728 | 31,812,466 | 31,999,846 |

| 67607 |  2359296 | 24,060,987 | 25,341,867 |
| 67607 |  2457600 | 25,342,731 | 26,332,587 |
| 67607 |  2621440 | 26,334,251 | 28,138,811 |
| 67607 |  2949120 | 28,140,731 | 29,539,491 |
| 67607 |  3145728 | 31,627,107 | 31,999,131 |

[RoKro]

Paráda, díky.

[RoKro]

Zkoušel jsem chvíli lovit, ale chodí mi jen ty delší jednotky, FFT-size okolo 2900000. Tak s tím asi moc špekulovat nepůjde.

[LookAS]

těch menších jak 2560k je velmi málo. Všechny jsou již rozpočítané, chodí jen v případě zrušených či neshodných výsledků, takže je velká náhoda je chytit. většina je 2560k, zbytek 2880k

[RoKro]

Mně právě chodily jen ty 2880k.

[Dzordzik]

No a když už jsem byl v tom, testnul jsem též šestijádrový i5-9600K.
Když to trochu přeženu, tak u něj je jedno, jak to počítání spustím :-)
Nejlíp vychází počítat jednu jednotku na 4 jádrech a zbylá dvě nechat flákat.
Možná by to běhalo o chloupek jinak s rychlejšími pamětmi, jsou tam HyperX Predator 16GB (2x8GB) DDR4 3200.
Je vidět, že levnější i5-9600K pěkně šlape na paty jen o málo starší i7-8700K. A to ta i5 není nijak ručně taktovaná, jen má v biosu zapnuto, že turbo má aplikovat na všechna jádra, jede pak na 4,6 GHz. Ta i7 má delid a přetakt na 4,8 GHz.

Kdyby se v tom chtěl někdo hrabat, tak výsledky testů uvádím níže (neprůměroval jsem, tak tam jsou měření opakovaně.)

Kód: Vybrat vše

Timings for 2560K FFT length (6 cores, 1 worker):  3.59 ms.  Throughput: 278.52 iter/sec.
Timings for 2560K FFT length (6 cores, 2 workers):  6.58,  6.64 ms.  Throughput: 302.44 iter/sec.
Timings for 2560K FFT length (6 cores, 3 workers): 10.55, 10.16,  9.64 ms.  Throughput: 297.01 iter/sec.
Timings for 2560K FFT length (6 cores, 4 workers): 23.01, 19.76, 10.27, 10.01 ms.  Throughput: 291.39 iter/sec.
Timings for 2560K FFT length (6 cores, 5 workers): 22.32, 19.51, 18.79, 22.10,  9.80 ms.  Throughput: 296.57 iter/sec.
Timings for 2560K FFT length (6 cores, 6 workers): 22.54, 19.94, 19.01, 22.35, 20.41, 19.05 ms.  Throughput: 293.31 iter/sec.

Timings for 2560K FFT length (6 cores, 1 worker):  3.24 ms.  Throughput: 309.08 iter/sec.
Timings for 2560K FFT length (6 cores, 2 workers):  6.58,  6.71 ms.  Throughput: 301.01 iter/sec.
Timings for 2560K FFT length (6 cores, 3 workers): 10.19, 10.07,  9.75 ms.  Throughput: 299.98 iter/sec.
Timings for 2560K FFT length (6 cores, 4 workers): 22.34, 19.39, 10.35,  9.80 ms.  Throughput: 295.04 iter/sec.
Timings for 2560K FFT length (6 cores, 5 workers): 22.92, 19.67, 18.85, 22.55,  9.88 ms.  Throughput: 293.11 iter/sec.
Timings for 2560K FFT length (6 cores, 6 workers): 23.90, 20.11, 19.36, 23.84, 21.92, 20.91 ms.  Throughput: 278.60 iter/sec.

Timings for 2560K FFT length (6 cores, 1 worker):  3.27 ms.  Throughput: 306.12 iter/sec.
Timings for 2560K FFT length (6 cores, 2 workers):  6.52,  6.74 ms.  Throughput: 301.64 iter/sec.
Timings for 2560K FFT length (6 cores, 3 workers): 10.43, 10.19,  9.80 ms.  Throughput: 296.03 iter/sec.
Timings for 2560K FFT length (6 cores, 4 workers): 22.45, 19.33, 10.18,  9.80 ms.  Throughput: 296.57 iter/sec.
Timings for 2560K FFT length (6 cores, 5 workers): 22.75, 19.69, 18.67, 22.81,  9.88 ms.  Throughput: 293.32 iter/sec.
Timings for 2560K FFT length (6 cores, 6 workers): 22.68, 19.71, 18.88, 22.85, 20.58, 19.35 ms.  Throughput: 291.79 iter/sec.


Timings for 2560K FFT length (5 cores, 1 worker):  3.50 ms.  Throughput: 285.99 iter/sec.
Timings for 2560K FFT length (5 cores, 2 workers):  8.13,  5.34 ms.  Throughput: 310.37 iter/sec.
Timings for 2560K FFT length (5 cores, 3 workers): 17.48,  7.83,  8.44 ms.  Throughput: 303.35 iter/sec.
Timings for 2560K FFT length (5 cores, 4 workers): 17.76, 16.06, 15.74,  8.58 ms.  Throughput: 298.69 iter/sec.
Timings for 2560K FFT length (5 cores, 5 workers): 17.68, 16.16, 15.90, 17.72, 16.76 ms.  Throughput: 297.45 iter/sec.

Timings for 2560K FFT length (5 cores, 1 worker):  3.09 ms.  Throughput: 323.14 iter/sec.
Timings for 2560K FFT length (5 cores, 2 workers):  8.04,  5.33 ms.  Throughput: 311.85 iter/sec.
Timings for 2560K FFT length (5 cores, 3 workers): 17.28,  7.76,  8.32 ms.  Throughput: 306.89 iter/sec.
Timings for 2560K FFT length (5 cores, 4 workers): 17.60, 15.93, 15.79,  8.52 ms.  Throughput: 300.29 iter/sec.
Timings for 2560K FFT length (5 cores, 5 workers): 17.70, 16.03, 15.86, 17.69, 16.53 ms.  Throughput: 298.99 iter/sec.

Timings for 2560K FFT length (4 cores, 1 worker):  3.00 ms.  Throughput: 333.77 iter/sec.
Timings for 2560K FFT length (4 cores, 2 workers):  6.23,  6.23 ms.  Throughput: 320.99 iter/sec.
Timings for 2560K FFT length (4 cores, 3 workers): 13.81, 12.90,  6.98 ms.  Throughput: 293.09 iter/sec.
Timings for 2560K FFT length (4 cores, 4 workers): 13.50, 12.66, 12.51, 13.06 ms.  Throughput: 309.59 iter/sec.

Timings for 2560K FFT length (4 cores, 1 worker):  3.02 ms.  Throughput: 330.62 iter/sec.
Timings for 2560K FFT length (4 cores, 2 workers):  6.26,  6.23 ms.  Throughput: 320.14 iter/sec.
Timings for 2560K FFT length (4 cores, 3 workers): 12.96, 12.39,  6.26 ms.  Throughput: 317.60 iter/sec.
Timings for 2560K FFT length (4 cores, 4 workers): 13.58, 12.86, 12.74, 13.44 ms.  Throughput: 304.26 iter/sec.

Timings for 2560K FFT length (3 cores, 1 worker):  3.18 ms.  Throughput: 314.08 iter/sec.
Timings for 2560K FFT length (3 cores, 2 workers):  9.76,  4.77 ms.  Throughput: 311.92 iter/sec.
Timings for 2560K FFT length (3 cores, 3 workers): 10.04,  9.76,  9.63 ms.  Throughput: 305.95 iter/sec.

Timings for 2560K FFT length (3 cores, 1 worker):  3.17 ms.  Throughput: 315.20 iter/sec.
Timings for 2560K FFT length (3 cores, 2 workers): 10.57,  5.24 ms.  Throughput: 285.43 iter/sec.
Timings for 2560K FFT length (3 cores, 3 workers):  9.96,  9.65,  9.57 ms.  Throughput: 308.48 iter/sec.

Timings for 2560K FFT length (2 cores, 1 worker):  4.21 ms.  Throughput: 237.42 iter/sec.
Timings for 2560K FFT length (2 cores, 2 workers):  8.36,  8.17 ms.  Throughput: 242.05 iter/sec.

Jak dlouho se ti počítá jednotka na té i7 v hodinách?

[Czech Human]

Pokusně jsem zapnul i Epyc když se týmová bárka palubou dotýká hladiny a vychází to 36 hodin na 4 jednotky SoB naráz á 16 HT jader. Na podrobnější krátké testy budu mít čas možná tak zítra. Když se časový odhad ukáže být správný, mohlo by to stihnout 5 sad po 4 jednotkách za těch 8 dnů co ještě zbývá.

[RoKro]

Jak dlouho se ti počítá jednotka na té i7 v hodinách?

Jednotka FFT 2560K byla za 22,75 hodin, jednotka 2880K kolem 25 hodin.

[Honza1616]

Jak dlouho se ti počítá jednotka na té i7 v hodinách?

Jednotka FFT 2560K byla za 22,75 hodin, jednotka 2880K kolem 25 hodin.

to máme skoro podobné já na 9900k udělám s FFT 2560k za 22h ale ještě u toho celé odpoledne hraji... jinak za asi 18 hodin...myslím...pokud to ždímá jednotku na plný výkon
FFT 2880 za 21,5 ..."ASI"

[Dzordzik]

Včera jsem se celý večer trápil s nastavením Alberta, nic z nastavení podobných předchozím turnajům nezabíralo, vycházely tam časy na jednotku kolem 1 a půl dne i 2 dnů, prostě nesmysl. Nakonec jsem se dneska dožral a pustil 88 threadů na 4 jednotky, což je přesně nejhorší nastavení podle Prime pokud jde o propustnost paměti, ale v reálu to nakonec počítá 4 jednotky za 16:50h, tj. jednu jednotku za 4h13 minut. Proč to tak je, když to tak nikdy na PG nebylo, netuším, už se tomu ani nesnažím rozumět. Každopádně testy přes Prime vůbec nesedí a to tak že ani trošku a jsou naopak v přímém rozporu s tím jak to pak v SOB projektu jede.

EDIT, tyhle časy platí pro 2WU 2880K a 2WU 2560K počítané najednou.

[nenym]

Moje zkušenost s Prime95 je stejná. Musím každý stroj otrocky vyzkoušet na skutečných jednotkách.

[Dzordzik]

Až tak stejná že to co ti vychází v Prime jako úplně nejhorší je ve finále nejlepší? U mě to zatím vždycky bylo cca tak že mě nakopl na správnou cestu a optimální nastavení dle reálných testů bylo plus mínus jedno jádro okolo toho. Zatím nikdy to nebylo až takto rozdílné, to je to co mě na tom mate.

[nenym]

Nevím, já jsem test pomocí prime95 opustil tak před půl rokem, možná ještě dříve. Prime 95 na noťasu s i5-4210M poradil nechat HT zapnuté a počítat dvě jednotky, každou na jednom vláknu. Ostrým testem na jednotkách - už si nevzpomínám, co to bylo zač - mi vyšlo HT vypnout na počítat jednu jednotku na dvou jádrech.

[Honza1616]

To ja zase na prime95 nedám dopustit, testovani na realnych jedotkach tohoto typu je nereálné to bych půl roku testoval a pak 2 mesice jen na turnajích a co zbytek roku? Nemluvě o vice jadrovych CPU kdy testovani reálného pocitaji trvá xx dnknna jednu sadu a pri 20+ jadrech/40t je tam tolik moznych konfiguraci, ze to proste nejde. A testováni tim příkazovým radkřádkem je zase pro me nereálné viz posledni turnaj z minulého roku, i když jste mi poradili jak to spravne spustit vysledky nesedeli ani po pul jednotce jak časový odhad v pprovnani s realnou jednotkou v realen počítání tak ani ani ladenim nejrychlejší konfigurace nesedělo
Za to p95 mi to ted dela přesně, vysledky jsem zde několikrát dával a 8 jader mi to spočítá za asi 23h...to si uz přesně nepamatuji
7 jader za 22
A 6 jader byl dokonce neco malo pres 20 hodin na nějaké jednotce pred par dny... v ostrém pocitani behem turnaje,
Timto testovanim tak dlouhých jednotek si to u me p95 opět silně pojistil