PG Turnaj 2019 - testy a nastavení

PrimeGrid Challenge

Moderátoři: petnek, nenym, Zelvuska

Odpovědět
Zpráva
Autor
nenym
78.9473684211 %
78.9473684211 %
Příspěvky: 7088
Registrován: úte 13 led, 2009 15:33
rok narození: 0- 0-1956
ID CNT statistics: 10124

Re: PG Turnaj 2019 - testy a nastavení

#301 Příspěvek od nenym » pon 11 lis, 2019 23:07

Honzo1616, vycházíš ze zcela zcestného předpokladu, že základní kredit je bez ohledu na délku úkolu stejný. To je samozřejmě blbost. Druhý, poněkud méně zavádějící omyl, je vycházet ze zbývajícího času, téměř dokonale přesný čas je uveden v stderr.
Blíží se další krize; jím plesnivé sýry, piji staré víno a jezdím v autě bez střechy.
UotD 535x
Obrázek 3xObrázek 8xObrázek 10xObrázek Obrázek
Obrázek

Uživatelský avatar
Honza1616
42.1052631579 %
42.1052631579 %
Příspěvky: 767
Registrován: sob 09 kvě, 2015 13:05
rok narození: 22 lis 1991
ID CNT statistics: 18396
Bydliště: Lysice
Kontaktovat uživatele:

Re: PG Turnaj 2019 - testy a nastavení

#302 Příspěvek od Honza1616 » úte 12 lis, 2019 05:13

nenym píše:
pon 11 lis, 2019 23:07
Honzo1616, vycházíš ze zcela zcestného předpokladu, že základní kredit je bez ohledu na délku úkolu stejný. To je samozřejmě blbost. Druhý, poněkud méně zavádějící omyl, je vycházet ze zbývajícího času, téměř dokonale přesný čas je uveden v stderr.
jistě že kredit není stejný je tam +20 a +50 a +75 kreditu navíc.....
a v app_configu mám <fraction_done_exact/> na každém podprojektu
Nová tabulka srovnání týmových počítačů https://docs.google.com/spreadsheets/d/ ... 27fFz2JT7Q
testovací balíček https://drive.google.com/file/d/1G0cGDj ... nV30cqKxkz
video návod jak správně provést test https://youtu.be/ctxzxdsdVpI
výsledky posílejte zde http://forum.czechnationalteam.cz/viewt ... =24&t=4553 tabulku mohou editovat jen správci z důvodu ochrany vložených dat
- - - - - - - - - - - - - - - - - - - - - - - -
master - Online - i9-9900k, MSI MEG Z390 ACE, Gigabyte RTX2080ti, 32GB DDR4 3500MHz, M.2 Samsung EVO 960 + SSHD 2TB, zdroj Corsair RM850 (850W), Win10Pro 64bit
slave 1 Online - AMD Ryzen 9 3900X, MSI X370 GAMING PRO CARBON, Asus GTX1080, 16GB DDR4, SSD OCZ TRION 100 - 250GB, Zalman ZM-1200, Win10Pro 64bit
slave 2 Online - Intel i7-6700k, Gigabyte H170-D3HP, MSI GTX780 Lightning 16GB DDR4, SSD Kingston240GB, zdroj Evolve 800W, Win10Pro 64bit

Uživatelský avatar
RoKro
42.1052631579 %
42.1052631579 %
Příspěvky: 670
Registrován: pon 31 srp, 2009 08:57
rok narození: 29 črc 1970
ID CNT statistics: 10234
Bydliště: Beroun
Kontaktovat uživatele:

Re: PG Turnaj 2019 - testy a nastavení

#303 Příspěvek od RoKro » úte 12 lis, 2019 07:11

Nene, kredit se liší obtížností jednotky a NAVÍC je tam ještě ta % bonifikace.
Viz můj příspěvek viewtopic.php?f=333&t=5084&hilit=DYFL&start=180#p103960
kde jsem spočítal jednotky do konce.
Závěr z toho byl přesně opačný.
Obrázek Obrázek Obrázek Obrázek Obrázek Obrázek Obrázek

Honza
63.1578947368 %
63.1578947368 %
Příspěvky: 2526
Registrován: pát 03 lis, 2006 10:46

Re: PG Turnaj 2019 - testy a nastavení

#304 Příspěvek od Honza » úte 12 lis, 2019 07:47

Ano, zcestné předpoklady, zcestné testování i zcestné závěry.
Podle toho se prosím neřiďte, jinak zapláčete nad výsledkem.

Rychlý test je ten, který jsem psal a mimo BOINC, ne pouštět zcela zbytečně BOINC na půl hodiny.
Pokud už BOINC, tak se přesný odhad výpočtu najde v stderr.txt, jak psal nenym, což je to samé, co se rychle získá testováním z příkazové řádky podle uvedeného příkladu.

Kreditové ohodnocení úkolů je aktuálně zhruba takto:
GFN21 přes 154k
GFN22 přes 710k
DYFL 946k400

Lze předpokládat, že krokoli na silných grafikách začně s DYFL a pak přejde na menší.
Smysl má počítat i GFN21 na CPU v MT režimu, hlavně pro ty, kdo nemají silné grafiky.

Honza
63.1578947368 %
63.1578947368 %
Příspěvky: 2526
Registrován: pát 03 lis, 2006 10:46

Re: PG Turnaj 2019 - testy a nastavení

#305 Příspěvek od Honza » úte 12 lis, 2019 07:58

RoKro píše:
úte 12 lis, 2019 07:11
Nene, kredit se liší obtížností jednotky a NAVÍC je tam ještě ta % bonifikace.
Viz můj příspěvek viewtopic.php?f=333&t=5084&hilit=DYFL&start=180#p103960
kde jsem spočítal jednotky do konce.
Závěr z toho byl přesně opačný.
Ano, přesně tak, ohodnocení má to tyto dvě složky.
První složka podle náročsti roste s testovaným b; a to logaritmicky. Proto každý úkol má přesně dané ohodnocení podle velmi přesného výpočtu.

Dzordzik
57.8947368421 %
57.8947368421 %
Příspěvky: 2136
Registrován: ned 12 úno, 2017 00:26
rok narození: 18 zář 1980
ID CNT statistics: 503
Bydliště: Zdounky (u Kroměříže)
Kontaktovat uživatele:

Re: PG Turnaj 2019 - testy a nastavení

#306 Příspěvek od Dzordzik » úte 12 lis, 2019 13:32

Honza píše:
úte 12 lis, 2019 07:47
Ano, zcestné předpoklady, zcestné testování i zcestné závěry.
Podle toho se prosím neřiďte, jinak zapláčete nad výsledkem.

Rychlý test je ten, který jsem psal a mimo BOINC, ne pouštět zcela zbytečně BOINC na půl hodiny.
Pokud už BOINC, tak se přesný odhad výpočtu najde v stderr.txt, jak psal nenym, což je to samé, co se rychle získá testováním z příkazové řádky podle uvedeného příkladu.

Kreditové ohodnocení úkolů je aktuálně zhruba takto:
GFN21 přes 154k
GFN22 přes 710k
DYFL 946k400

Lze předpokládat, že krokoli na silných grafikách začně s DYFL a pak přejde na menší.
Smysl má počítat i GFN21 na CPU v MT režimu, hlavně pro ty, kdo nemají silné grafiky.
Honzo, k tomu GFN21 na CPU v MT režimu, jak to škáluje s počtem jader, máš to otestované? Chtěl jsem se na to vrhnout včera, ale nedostal jsem se k tomu.
Albert: Dual Xeon E5-2696 V4, Supermicro X10DRG-Q, 64GB DDR4 ECC, 1x GTX 1070, Enermax Platimax 1700W

Honza
63.1578947368 %
63.1578947368 %
Příspěvky: 2526
Registrován: pát 03 lis, 2006 10:46

Re: PG Turnaj 2019 - testy a nastavení

#307 Příspěvek od Honza » úte 12 lis, 2019 14:24

Dzordzik píše:
úte 12 lis, 2019 13:32
Honzo, k tomu GFN21 na CPU v MT režimu, jak to škáluje s počtem jader, máš to otestované? Chtěl jsem se na to vrhnout včera, ale nedostal jsem se k tomu.
Na i7 8700K by to bylo:
-nt 1 za 73 hodin :20 min
-nt 3 za 28 hodin : 00 min
-nt 5 za 21 hodin : 10 min
-nt 6 za 20 hodin : 50 min

2x-nt 3 za 45 hodin : 50 min, tedy jeden za necelých 23 hodin.

Kombajn by chroupal jeden -nt 7 za 23:10, čtvrtý puštěný za 26:50, ale to jsem nestihl poladit afinitu, ale do 7 hodin na jeden by se vešel.

Uživatelský avatar
RoKro
42.1052631579 %
42.1052631579 %
Příspěvky: 670
Registrován: pon 31 srp, 2009 08:57
rok narození: 29 črc 1970
ID CNT statistics: 10234
Bydliště: Beroun
Kontaktovat uživatele:

Re: PG Turnaj 2019 - testy a nastavení

#308 Příspěvek od RoKro » úte 12 lis, 2019 14:34

Chápu to dobře, že nejvýnosnější je jet 6 jednotek každou na jednom jádře? Bez MT.
Obrázek Obrázek Obrázek Obrázek Obrázek Obrázek Obrázek

Honza
63.1578947368 %
63.1578947368 %
Příspěvky: 2526
Registrován: pát 03 lis, 2006 10:46

Re: PG Turnaj 2019 - testy a nastavení

#309 Příspěvek od Honza » úte 12 lis, 2019 14:38

RoKro píše:
úte 12 lis, 2019 14:34
Chápu to dobře, že nejvýnosnější je jet 6 jednotek každou na jednom jádře? Bez MT.
6 jednotek, každou na jednom jádře, jsem nezkoušel.

Uživatelský avatar
RoKro
42.1052631579 %
42.1052631579 %
Příspěvky: 670
Registrován: pon 31 srp, 2009 08:57
rok narození: 29 črc 1970
ID CNT statistics: 10234
Bydliště: Beroun
Kontaktovat uživatele:

Re: PG Turnaj 2019 - testy a nastavení

#310 Příspěvek od RoKro » úte 12 lis, 2019 14:41

A co je tohle: -nt 1 za 73 hodin :20 min
Jedna jednotka na jednom jádře?

Pokud ano a pokud by se to při puštění na všech šesti jádrech moc nezpomalilo, pak mi to vychází nejlíp.
Obrázek Obrázek Obrázek Obrázek Obrázek Obrázek Obrázek

Honza
63.1578947368 %
63.1578947368 %
Příspěvky: 2526
Registrován: pát 03 lis, 2006 10:46

Re: PG Turnaj 2019 - testy a nastavení

#311 Příspěvek od Honza » úte 12 lis, 2019 14:57

RoKro píše:
úte 12 lis, 2019 14:41
A co je tohle: -nt 1 za 73 hodin :20 min
Jedna jednotka na jednom jádře?

Pokud ano a pokud by se to při puštění na všech šesti jádrech moc nezpomalilo, pak mi to vychází nejlíp.
Ano.

Ach jo, mi dáváte... 45hh

Tedy testy na i7 8700K bez MT, každá další jednotka jedno jádro.
1 - 73:10
2 - 78:20, tedy zhroba 39:10 na task
3 - 84:50, tož zhruba 28:15 na task
4 - 99:40, zhruba nějakých 25 hodin na task
5 - 119:00, vychází 23:45 na task. Tady už se to blíži 5 dnům a stihnout 2 várky by bylo těsné.
6 - 143:00, vychází podobně, ale to už nezbyde na GPU.

Pro mě by na i7 8700K, kdybych chtěl počítat na CPU, vychází nejlépe 1 task na 5 jader a nechat jedno volné, ať maká na GPU.
V pohodě 11 jednotek, což mi přijde lepší než pomaleji počítat 10 s rizikem, že druhou várku nestihnu.

Dzordzik
57.8947368421 %
57.8947368421 %
Příspěvky: 2136
Registrován: ned 12 úno, 2017 00:26
rok narození: 18 zář 1980
ID CNT statistics: 503
Bydliště: Zdounky (u Kroměříže)
Kontaktovat uživatele:

Re: PG Turnaj 2019 - testy a nastavení

#312 Příspěvek od Dzordzik » úte 12 lis, 2019 18:34

Honza píše:
úte 12 lis, 2019 14:24
Dzordzik píše:
úte 12 lis, 2019 13:32
Honzo, k tomu GFN21 na CPU v MT režimu, jak to škáluje s počtem jader, máš to otestované? Chtěl jsem se na to vrhnout včera, ale nedostal jsem se k tomu.
Na i7 8700K by to bylo:
-nt 1 za 73 hodin :20 min
-nt 3 za 28 hodin : 00 min
-nt 5 za 21 hodin : 10 min
-nt 6 za 20 hodin : 50 min

2x-nt 3 za 45 hodin : 50 min, tedy jeden za necelých 23 hodin.

Kombajn by chroupal jeden -nt 7 za 23:10, čtvrtý puštěný za 26:50, ale to jsem nestihl poladit afinitu, ale do 7 hodin na jeden by se vešel.
Tím kombajnem máš ny mysli jaký stroj a jakým CPU? Jestli nějaký Dual Xeon, tak mi ten čas příjde nějaký vysoký?
Albert: Dual Xeon E5-2696 V4, Supermicro X10DRG-Q, 64GB DDR4 ECC, 1x GTX 1070, Enermax Platimax 1700W

Dzordzik
57.8947368421 %
57.8947368421 %
Příspěvky: 2136
Registrován: ned 12 úno, 2017 00:26
rok narození: 18 zář 1980
ID CNT statistics: 503
Bydliště: Zdounky (u Kroměříže)
Kontaktovat uživatele:

Re: PG Turnaj 2019 - testy a nastavení

#313 Příspěvek od Dzordzik » úte 12 lis, 2019 21:00

Honza píše:
pon 11 lis, 2019 16:41
Dzordzik píše:
pon 11 lis, 2019 16:21
Jaké FFT to CPU GFN používá? Vím že je to vůči efektivitě GPU nesmysl ale CPU jader mám mrtě, tak to snad aspoň něco spočítá.
Tohle není LLR, ale Genefer aplikace, tady jsou důležité použíté transformace.

U GFN21 jsem nasimuloval, co by se zhruba počítalo podle max in progress / leading edge.

Kód: Vybrat vše

>genefer_windows64_3.3.4.exe -q "478678^2097152+1" -nt 6
Na i7 8700K a FMA3 transformaci by test trval něco přes 24 hodin.

Pro srovnání, RTX 2080, driver 441.12 a OCL4 transformace trvdí lehce přes 7 hodin.
GFN22 by byl za prý 26,5 hodiny, DYFL lehce přes 29 hodin.
Honzo, můžu se zeptat jestli jednotky GFN21 a CPUGFN21 jsou si identické, tj. mají stejnou náročnost výpočtu a stejný počet kreditů? Předpokládám že ano? A jaký TDP má při tom výkonu co píšeš tvoje 2080ka samotná?
Albert: Dual Xeon E5-2696 V4, Supermicro X10DRG-Q, 64GB DDR4 ECC, 1x GTX 1070, Enermax Platimax 1700W

Uživatelský avatar
RoKro
42.1052631579 %
42.1052631579 %
Příspěvky: 670
Registrován: pon 31 srp, 2009 08:57
rok narození: 29 črc 1970
ID CNT statistics: 10234
Bydliště: Beroun
Kontaktovat uživatele:

Re: Challenge Series - turnaj na Primegridu 2019

#314 Příspěvek od RoKro » stř 13 lis, 2019 07:26

Update stavu
Po návratu domů ta windowsí kontrola paměti, co měla dát 15 koleček testů a měla na to asi deset hodin, byla seklá ve 21% prvního kola a nehlásila žádnou chybu. Takže se problém asi dostavil, ale nevypořádalo se to s ním.
Pak mi odpoledne a večer přes šest hodin běželo 53 koleček nějakého GoldMemory testu (z bootovatelné flashky), chybu to nezahlásilo.
Před spaním jsem pustil v BM jednu jednotku PSP LLR na 6 vláknech. K tomu jsem pustil několik instancí memtest64, každou pro 3GB paměti. A z toho už vypadly dvě chyby: "Memory error detected! Copying between nějaký adresy did not result in accurate copy." Takže mě čeká, co tu i zmiňujete, přes víkend takhle otestuju každý ze čtyř paměťových modulů samostatně.
Obrázek Obrázek Obrázek Obrázek Obrázek Obrázek Obrázek

Uživatelský avatar
RoKro
42.1052631579 %
42.1052631579 %
Příspěvky: 670
Registrován: pon 31 srp, 2009 08:57
rok narození: 29 črc 1970
ID CNT statistics: 10234
Bydliště: Beroun
Kontaktovat uživatele:

Re: PG Turnaj 2019 - testy a nastavení

#315 Příspěvek od RoKro » stř 13 lis, 2019 07:32

Honzo, díky.
Honza píše:
úte 12 lis, 2019 14:57
V pohodě 11 jednotek, což mi přijde lepší než pomaleji počítat 10 s rizikem, že druhou várku nestihnu.
A neměl jsi na mysli spíš v pohodě 9 jednotek?
Napřed 5 a pak podle skutečně zbývajícího času, aby byla dostatečná rezerva, tak nejspíš 4.
Obrázek Obrázek Obrázek Obrázek Obrázek Obrázek Obrázek

Honza
63.1578947368 %
63.1578947368 %
Příspěvky: 2526
Registrován: pát 03 lis, 2006 10:46

Re: PG Turnaj 2019 - testy a nastavení

#316 Příspěvek od Honza » stř 13 lis, 2019 10:24

Dzordzik píše:
úte 12 lis, 2019 18:34
Tím kombajnem máš ny mysli jaký stroj a jakým CPU? Jestli nějaký Dual Xeon, tak mi ten čas příjde nějaký vysoký?
Ano, dual 16-core Xeon.
Jede na nižší frekvenci a zde nevyužiju AVX512 jako u LLR, ale jen FMA3.

Honza
63.1578947368 %
63.1578947368 %
Příspěvky: 2526
Registrován: pát 03 lis, 2006 10:46

Re: PG Turnaj 2019 - testy a nastavení

#317 Příspěvek od Honza » stř 13 lis, 2019 10:34

Dzordzik píše:
úte 12 lis, 2019 21:00
Honzo, můžu se zeptat jestli jednotky GFN21 a CPUGFN21 jsou si identické, tj. mají stejnou náročnost výpočtu a stejný počet kreditů? Předpokládám že ano? A jaký TDP má při tom výkonu co píšeš tvoje 2080ka samotná?
Ano, identické, stejnou jednotku lze počítat na nVidia, AMD i CPU.

ZNovu tedy testuji a na GFN21 mi GPU-Z mi tvrdí kolem 230W a GPU clock 1935-1950 MHz, mám hybridní chlazení na MSI Sea Hawk.
Ze zvědavosti jsem zkusil i DYFL, tak ten si verzme 240-250W a už jede do stropu TDPa snižuje na 1920-1905 MHz.

A vůbec pro srovnání, GFN Mega, který teď běžně počítám, si řekne jen o 150W.

Honza
63.1578947368 %
63.1578947368 %
Příspěvky: 2526
Registrován: pát 03 lis, 2006 10:46

Re: PG Turnaj 2019 - testy a nastavení

#318 Příspěvek od Honza » stř 13 lis, 2019 10:36

RoKro píše:
stř 13 lis, 2019 07:32
Honza píše:
úte 12 lis, 2019 14:57
V pohodě 11 jednotek, což mi přijde lepší než pomaleji počítat 10 s rizikem, že druhou várku nestihnu.
A neměl jsi na mysli spíš v pohodě 9 jednotek?
Napřed 5 a pak podle skutečně zbývajícího času, aby byla dostatečná rezerva, tak nejspíš 4.
Ne, měl jsem opravu na myslím jet MT a zvládnout v pohodě 11 jednotek.

Honza
63.1578947368 %
63.1578947368 %
Příspěvky: 2526
Registrován: pát 03 lis, 2006 10:46

Re: Challenge Series - turnaj na Primegridu 2019

#319 Příspěvek od Honza » stř 13 lis, 2019 10:39

Díky za update.
Kombinace pustit PSP LLR, tedy solidně stroj zatížit a k tomu vzít memtest jako rycheljší indikaci chyb...a ukázalo se.
Vidiím 12 inconclisive, 3 valid, 5 invalid, takže bych očekával většinu invalidních.

K těm pamětem můžeš udělat i metodou polovičních intervalů, tedy zkusit dvě, pak druhé dvě a pak poslední, pokud máš 4 moduly.
Ono je teoreticky také možné, že se ti chyba při použití jednoho modulu neprojeví, protože CPU pojede single-channel a nedostane pořádný zápřah.

Uživatelský avatar
RoKro
42.1052631579 %
42.1052631579 %
Příspěvky: 670
Registrován: pon 31 srp, 2009 08:57
rok narození: 29 črc 1970
ID CNT statistics: 10234
Bydliště: Beroun
Kontaktovat uživatele:

Re: PG Turnaj 2019 - testy a nastavení

#320 Příspěvek od RoKro » stř 13 lis, 2019 10:48

Jo, pravda, už to vidím, jednotku na 5 jádrech.
Obrázek Obrázek Obrázek Obrázek Obrázek Obrázek Obrázek

Odpovědět

Zpět na „Prime Grid“