PG Turnaj 2019 - testy a nastavení

[nenym]

Honzo1616, vycházíš ze zcela zcestného předpokladu, že základní kredit je bez ohledu na délku úkolu stejný. To je samozřejmě blbost. Druhý, poněkud méně zavádějící omyl, je vycházet ze zbývajícího času, téměř dokonale přesný čas je uveden v stderr.

[Honza1616]

Honzo1616, vycházíš ze zcela zcestného předpokladu, že základní kredit je bez ohledu na délku úkolu stejný. To je samozřejmě blbost. Druhý, poněkud méně zavádějící omyl, je vycházet ze zbývajícího času, téměř dokonale přesný čas je uveden v stderr.

jistě že kredit není stejný je tam +20 a +50 a +75 kreditu navíc.....
a v app_configu mám <fraction_done_exact/> na každém podprojektu

[RoKro]

Nene, kredit se liší obtížností jednotky a NAVÍC je tam ještě ta % bonifikace.
Viz můj příspěvek viewtopic.php?f=333&t=5084&hilit=DYFL&start=180#p103960
kde jsem spočítal jednotky do konce.
Závěr z toho byl přesně opačný.

[Honza]

Ano, zcestné předpoklady, zcestné testování i zcestné závěry.
Podle toho se prosím neřiďte, jinak zapláčete nad výsledkem.

Rychlý test je ten, který jsem psal a mimo BOINC, ne pouštět zcela zbytečně BOINC na půl hodiny.
Pokud už BOINC, tak se přesný odhad výpočtu najde v stderr.txt, jak psal nenym, což je to samé, co se rychle získá testováním z příkazové řádky podle uvedeného příkladu.

Kreditové ohodnocení úkolů je aktuálně zhruba takto:
GFN21 přes 154k
GFN22 přes 710k
DYFL 946k400

Lze předpokládat, že krokoli na silných grafikách začně s DYFL a pak přejde na menší.
Smysl má počítat i GFN21 na CPU v MT režimu, hlavně pro ty, kdo nemají silné grafiky.

[Honza]

Nene, kredit se liší obtížností jednotky a NAVÍC je tam ještě ta % bonifikace.
Viz můj příspěvek viewtopic.php?f=333&t=5084&hilit=DYFL&start=180#p103960
kde jsem spočítal jednotky do konce.
Závěr z toho byl přesně opačný.

Ano, přesně tak, ohodnocení má to tyto dvě složky.
První složka podle náročsti roste s testovaným b; a to logaritmicky. Proto každý úkol má přesně dané ohodnocení podle velmi přesného výpočtu.

[Dzordzik]

Ano, zcestné předpoklady, zcestné testování i zcestné závěry.
Podle toho se prosím neřiďte, jinak zapláčete nad výsledkem.

Rychlý test je ten, který jsem psal a mimo BOINC, ne pouštět zcela zbytečně BOINC na půl hodiny.
Pokud už BOINC, tak se přesný odhad výpočtu najde v stderr.txt, jak psal nenym, což je to samé, co se rychle získá testováním z příkazové řádky podle uvedeného příkladu.

Kreditové ohodnocení úkolů je aktuálně zhruba takto:
GFN21 přes 154k
GFN22 přes 710k
DYFL 946k400

Lze předpokládat, že krokoli na silných grafikách začně s DYFL a pak přejde na menší.
Smysl má počítat i GFN21 na CPU v MT režimu, hlavně pro ty, kdo nemají silné grafiky.

Honzo, k tomu GFN21 na CPU v MT režimu, jak to škáluje s počtem jader, máš to otestované? Chtěl jsem se na to vrhnout včera, ale nedostal jsem se k tomu.

[Honza]

Honzo, k tomu GFN21 na CPU v MT režimu, jak to škáluje s počtem jader, máš to otestované? Chtěl jsem se na to vrhnout včera, ale nedostal jsem se k tomu.

Na i7 8700K by to bylo:
-nt 1 za 73 hodin :20 min
-nt 3 za 28 hodin : 00 min
-nt 5 za 21 hodin : 10 min
-nt 6 za 20 hodin : 50 min

2x-nt 3 za 45 hodin : 50 min, tedy jeden za necelých 23 hodin.

Kombajn by chroupal jeden -nt 7 za 23:10, čtvrtý puštěný za 26:50, ale to jsem nestihl poladit afinitu, ale do 7 hodin na jeden by se vešel.

[RoKro]

Chápu to dobře, že nejvýnosnější je jet 6 jednotek každou na jednom jádře? Bez MT.

[Honza]

Chápu to dobře, že nejvýnosnější je jet 6 jednotek každou na jednom jádře? Bez MT.

6 jednotek, každou na jednom jádře, jsem nezkoušel.

[RoKro]

A co je tohle: -nt 1 za 73 hodin :20 min
Jedna jednotka na jednom jádře?

Pokud ano a pokud by se to při puštění na všech šesti jádrech moc nezpomalilo, pak mi to vychází nejlíp.

[Honza]

A co je tohle: -nt 1 za 73 hodin :20 min
Jedna jednotka na jednom jádře?

Pokud ano a pokud by se to při puštění na všech šesti jádrech moc nezpomalilo, pak mi to vychází nejlíp.

Ano.

Ach jo, mi dáváte...

Tedy testy na i7 8700K bez MT, každá další jednotka jedno jádro.
1 - 73:10
2 - 78:20, tedy zhroba 39:10 na task
3 - 84:50, tož zhruba 28:15 na task
4 - 99:40, zhruba nějakých 25 hodin na task
5 - 119:00, vychází 23:45 na task. Tady už se to blíži 5 dnům a stihnout 2 várky by bylo těsné.
6 - 143:00, vychází podobně, ale to už nezbyde na GPU.

Pro mě by na i7 8700K, kdybych chtěl počítat na CPU, vychází nejlépe 1 task na 5 jader a nechat jedno volné, ať maká na GPU.
V pohodě 11 jednotek, což mi přijde lepší než pomaleji počítat 10 s rizikem, že druhou várku nestihnu.

[Dzordzik]

Honzo, k tomu GFN21 na CPU v MT režimu, jak to škáluje s počtem jader, máš to otestované? Chtěl jsem se na to vrhnout včera, ale nedostal jsem se k tomu.

Na i7 8700K by to bylo:
-nt 1 za 73 hodin :20 min
-nt 3 za 28 hodin : 00 min
-nt 5 za 21 hodin : 10 min
-nt 6 za 20 hodin : 50 min

2x-nt 3 za 45 hodin : 50 min, tedy jeden za necelých 23 hodin.

Kombajn by chroupal jeden -nt 7 za 23:10, čtvrtý puštěný za 26:50, ale to jsem nestihl poladit afinitu, ale do 7 hodin na jeden by se vešel.

Tím kombajnem máš ny mysli jaký stroj a jakým CPU? Jestli nějaký Dual Xeon, tak mi ten čas příjde nějaký vysoký?

[Dzordzik]

Jaké FFT to CPU GFN používá? Vím že je to vůči efektivitě GPU nesmysl ale CPU jader mám mrtě, tak to snad aspoň něco spočítá.

Tohle není LLR, ale Genefer aplikace, tady jsou důležité použíté transformace.

U GFN21 jsem nasimuloval, co by se zhruba počítalo podle max in progress / leading edge.

Kód: Vybrat vše

>genefer_windows64_3.3.4.exe -q "478678^2097152+1" -nt 6

Na i7 8700K a FMA3 transformaci by test trval něco přes 24 hodin.

Pro srovnání, RTX 2080, driver 441.12 a OCL4 transformace trvdí lehce přes 7 hodin.
GFN22 by byl za prý 26,5 hodiny, DYFL lehce přes 29 hodin.

Honzo, můžu se zeptat jestli jednotky GFN21 a CPUGFN21 jsou si identické, tj. mají stejnou náročnost výpočtu a stejný počet kreditů? Předpokládám že ano? A jaký TDP má při tom výkonu co píšeš tvoje 2080ka samotná?

[RoKro]

Update stavu
Po návratu domů ta windowsí kontrola paměti, co měla dát 15 koleček testů a měla na to asi deset hodin, byla seklá ve 21% prvního kola a nehlásila žádnou chybu. Takže se problém asi dostavil, ale nevypořádalo se to s ním.
Pak mi odpoledne a večer přes šest hodin běželo 53 koleček nějakého GoldMemory testu (z bootovatelné flashky), chybu to nezahlásilo.
Před spaním jsem pustil v BM jednu jednotku PSP LLR na 6 vláknech. K tomu jsem pustil několik instancí memtest64, každou pro 3GB paměti. A z toho už vypadly dvě chyby: "Memory error detected! Copying between nějaký adresy did not result in accurate copy." Takže mě čeká, co tu i zmiňujete, přes víkend takhle otestuju každý ze čtyř paměťových modulů samostatně.

[RoKro]

Honzo, díky.

V pohodě 11 jednotek, což mi přijde lepší než pomaleji počítat 10 s rizikem, že druhou várku nestihnu.

A neměl jsi na mysli spíš v pohodě 9 jednotek?
Napřed 5 a pak podle skutečně zbývajícího času, aby byla dostatečná rezerva, tak nejspíš 4.

[Honza]

Tím kombajnem máš ny mysli jaký stroj a jakým CPU? Jestli nějaký Dual Xeon, tak mi ten čas příjde nějaký vysoký?

Ano, dual 16-core Xeon.
Jede na nižší frekvenci a zde nevyužiju AVX512 jako u LLR, ale jen FMA3.

[Honza]

Honzo, můžu se zeptat jestli jednotky GFN21 a CPUGFN21 jsou si identické, tj. mají stejnou náročnost výpočtu a stejný počet kreditů? Předpokládám že ano? A jaký TDP má při tom výkonu co píšeš tvoje 2080ka samotná?

Ano, identické, stejnou jednotku lze počítat na nVidia, AMD i CPU.

ZNovu tedy testuji a na GFN21 mi GPU-Z mi tvrdí kolem 230W a GPU clock 1935-1950 MHz, mám hybridní chlazení na MSI Sea Hawk.
Ze zvědavosti jsem zkusil i DYFL, tak ten si verzme 240-250W a už jede do stropu TDPa snižuje na 1920-1905 MHz.

A vůbec pro srovnání, GFN Mega, který teď běžně počítám, si řekne jen o 150W.

[Honza]

V pohodě 11 jednotek, což mi přijde lepší než pomaleji počítat 10 s rizikem, že druhou várku nestihnu.

A neměl jsi na mysli spíš v pohodě 9 jednotek?
Napřed 5 a pak podle skutečně zbývajícího času, aby byla dostatečná rezerva, tak nejspíš 4.

Ne, měl jsem opravu na myslím jet MT a zvládnout v pohodě 11 jednotek.

[Honza]

Díky za update.
Kombinace pustit PSP LLR, tedy solidně stroj zatížit a k tomu vzít memtest jako rycheljší indikaci chyb...a ukázalo se.
Vidiím 12 inconclisive, 3 valid, 5 invalid, takže bych očekával většinu invalidních.

K těm pamětem můžeš udělat i metodou polovičních intervalů, tedy zkusit dvě, pak druhé dvě a pak poslední, pokud máš 4 moduly.
Ono je teoreticky také možné, že se ti chyba při použití jednoho modulu neprojeví, protože CPU pojede single-channel a nedostane pořádný zápřah.

[RoKro]

Jo, pravda, už to vidím, jednotku na 5 jádrech.