PG Turnaj 2019 - testy a nastavení

[Honza]

RoKro, vidím, že si svůj stroj vylepšil hezky výkonově i stabilitou, to je ukázka, jak na to.

Když jsme u toho jak na to, tedy z oblasti metodologie, tak pár věcí, co mě ještě napadlo.
Když testujeme z příkazové řádky (ale i obecně), je dobré testovat za stejných okolností, jak jsem zmiňoval.
To mimo jiné pro mě znamená, že je záhodno testovat jednotku vždy od začátku, ne od checkpointu.

Příklad - začnu testovat. Někdo zavolá, přijde, přestávka na oběd, nechám výpočet puštený.
Pak jdu na další test, ale ten nejede od začátku, ale od toho, kde minule skončil, tudížko logicky bude odhad zbylého času nepřesný.
Navíc se ošidím o odhad podle benchmarku, který podle mě stačí a je riziko, že budu srovnávat hrušky a jabka.

Prostě před dalším testem je dobré checkpoint smazat a jet vždy od začátku, to mi přijde logické.

Další metodologická poznámka je k verzím, tentokráte bych na to šel spíše selským rozumem.
A ten mi říká (pokud ho tedy mám a nezaměňuji za něco jiného), že je vhodnější testovat verzí, která bude použita v běžném provozu, tedy tím, co si BOINC stáhne.
Ale budiž, nejnovější verze také není špatné pravidlo, když ji otestuji, že dává validní výsledky, udělám si anonymous platform a všechno kolem, abych zajistil, že bude opravdu použita při ostrých výpočtech.

Ze screenshotu jsou dvě věci, které snad také snesou komentáře.
Kromě první metodologické poznámky (jeden odhad z benchmarku, druhý z rozpočítané jednotky) je pro mě zajímavé, že "starší" verze zvolila OCL3 transformaci, kdežto "novější" OCL5.
A abych se v tom nevyznal ani sám, tak mě 3.3.3-2 na stejném testu vybrala OCL4 (RTX 2080, bez Ti), odhad 6:52
(OCL3 by měl odhad 7:16 a OCL5 6:52, stejně jako OCL4).

Jó, a u grafiky bych si dal pozor, na jakých frekvencích běží. "odpočatá" může při krátkém testu běžet na vyšší frekvencích, než zahrátá.
To už jen pro zpěstření...

[vkliber]

Nějak to tu zapadlo.

Ahoj, měl bych pár dotazů jak počítat:

1) Když se mi stahne úkol pro GPU GFN21 tak mi to odhadne cca 2dny a pak to reálně poběží tak 14 hodin na RX Vega 64. Je to normální, že to boinc takhle neodhadne? (aktálně mám spočteno cca 80% testovacího úkolu)
2)Jde tam nastavit na grafice v olvadačích AMD ještě něco jiného pro podporu ryhlejšího výpočtu? (vyjma taktování, to se mi dělat nechce)
3)Boinc úkol stahne jako 100% pro GPU + 0,241 CPU - co můžu počítat ještě k tomu na procesoru ryzen 1600?... myslím to tak, zda můžu mít všech 12 vláken vytíženo WCG nebo třeb jen půlku vláken?
4) Obdobně si lámu hlavu jestli by mělo vliv např. maximální vytížení CPU nastaveno na 50%? Máte s tím nějakou nejlepší zkušenost nebo se to musí změřit nějakým programem/dotazem?
Díky

1) Ano, je to celkem normální, zvláště když se jedná o první počítanou jednotku. BOINC odhadne prvotní dobu trvání a pak se to časem srovná podle skutečných časů.
2) Netuším (nemám), ale pokud nechceš taktovat, tak toho asi moc nezměníš. Maximálně tak verzi ovladače.
3) 100%GPU a 0,241%CPU říká BOINCu, kolik si jednotka vezme pro sebe prostedků. Pokud tedy na všech vláknech CPU spustíš WCG a následně spustíš teoreticky 5 úkolů na GPU (což si vezme 5 x 0,241 = 1,205 CPU), přestane se ti jedna jednotka WCG počítat (BOINC rezervoval 1,205 procesorů pro GPU). To je tedy pouze to, jak BOINC řídí rozdělení prostředků (CPU a GPU) mezi úkoly. Nic to nevypovídá o výkonu. Samozřejmě výpočty na CPU si sežerou z PC mnohem více jiných prostředků (např. paměť, disk) což může ovlivnit (zpomalit) výpočty na GPU.
4) nastavení max. vytížení CPU na 50% ... POZOR, jsou 2 volby ... jedna říká kolik procesorů se má využít (mám 4 jádro, tak chci ať počítá pouze na 2 jádrech) a druhá kolik procesorového času se má využít (boudou použity všechny CPU, ale jednotka se bude chvilku počítat a chvilku odpočívat tak, aby celková zátěž CPU nepřekročila 50%). První volbou ovlivníš počet počítaných jednotek. Druhá volba se většinou nepoužívá.

[fobius]

díky za reakci, jsem nadšenej že to nezapadlo a dostal jsem strukturovanou odpověď.

Souhlasím s předchozími komentáři, že pro nás laiky by byl super pro každé kolo PG udělat komplexní návod na otestování. Pročítat jedno vlákno Testy na PG je neefektivní a člověk se ztratí nebo se zbytečně znovu doptává. Já taky když pročítám ty pro mě složité matematické úvahy nad cílem projektu, patřím mezi počtáře amatéry co to chtěj dělat lépe.

Někde ve vláknu jsem četl, že se bude počítat poslední kolo jen na GPU. Je to pravda, nebo do toho může promluvit i CPU. Takže bych měl stáhnout jednotky GFN pro CPU a GPU?

[vkliber]

Bude se počítat aplikace GFN-21, GFN-22 a GFN-DYFL.
Pouze GNF-21 lze počítat na CPU, doba trvání asi 300 hodin .

[v.svantner]

Jen aby to nezapadlo, turnaj je jen na 240 hodin (10 dnů).

[fobius]

Mam jeden dotaz chci si koupit na bazaru starsiho xeona 2660 v3... ale resim jake pameti do nej... podle me by mohlo stacit 4x4 ale nevim jestli je nutne ecc ci nikoli pro ucely nasich vypoctu.... muzete nekdo poradit?

[Albert]

Mam jeden dotaz chci si koupit na bazaru starsiho xeona 2660 v3... ale resim jake pameti do nej... podle me by mohlo stacit 4x4 ale nevim jestli je nutne ecc ci nikoli pro ucely nasich vypoctu.... muzete nekdo poradit?

Jakou budeš mít základní desku?

[killik]

Mam jeden dotaz chci si koupit na bazaru starsiho xeona 2660 v3... ale resim jake pameti do nej... podle me by mohlo stacit 4x4 ale nevim jestli je nutne ecc ci nikoli pro ucely nasich vypoctu.... muzete nekdo poradit?

Já bych doporučil ECC RAM, protože když se Ti objeví chyba v modulu, tak výsledek máš validní narozdíl od non-ECC RAM.
Samotnýmu se mi přihodilo, že při turnaji PG mi server nahlásil ECC error, takže po turnaji šla pamět na výměnu.
Jde spíše o to v jakém MB budeš to CPU mít.

[Indy]

Ano ano, je vhodné udělat úvahu, jak do 240 hodin poskládat počítané jednotky, aby za to bylo co nejvíc bodů. Třeba pro ty časy mojí GTX 1070 jsem si nasekal možnosti do takovéhle tabulky, zeleně označená varianta je nejvýhodnější...

... Kdybych měl v odhadu, že se jednotka DYFL počítá 77,9 hodiny, asi bych do varianty 3 těchto jednotek nešel, protože by v reálu mohly být trošku delší a poslední jednotku bych o pár minut nestihl odevzdat.

1. Rokro supr práce, já mám 2ks těchto GTX1070 a chtěl jsem jít do varianty 2,1,1 ale přesvědčil jsi mne (moje EVGA karty to dávají za 75 hodin)
2. Jednotky se budou během turnaje prodlužovat, proto komu to vychází těsně, tak je lepší hned na začátku stáhnout více jednotek (měly by být nejkratší) a pak jen počítat

[RoKro]

Hele, byl to jenom test. Určitě to pak chce po první i po druhé jednotce zkontrolovat, jestli není realita příliš jiná. Když bude pc dělat i něco jiného, když bude počítat na dvou (třech, čtyřech) GPu zároveň, ...
Bodově není mezi variantami 3-0-0 a 2-1-1 výrazný rozdíl. Ty bodové hodnoty už jsou dva nebo tři týdny staré, bodové ohodnocení za jednotku může u jednoho podprojektu narůst víc, než u jiného a v době turnaje může klidně být výhodnější 2-1-1, to pak chce znovu si ty varianty ohodnotit podle v tu dobu aktuálního bodování. I ty časy se třeba trošku protáhnou. Bral jsem to jen jako ukázku, jak bych o volbě strategie přemýšlel.

[fobius]

Mam jeden dotaz chci si koupit na bazaru starsiho xeona 2660 v3... ale resim jake pameti do nej... podle me by mohlo stacit 4x4 ale nevim jestli je nutne ecc ci nikoli pro ucely nasich vypoctu.... muzete nekdo poradit?

Jakou budeš mít základní desku?

Je to spocitany, vychazi to na 11200 Kc, nize je rozpis vsech komponent:
CPU E5 2660 V3 3.3GHz Turbo Boost
RAM Crucial Ballistix 16GB (4x4GB)- nové
MB Intel C612, Sata 3, USB 3, m.2 NVME - nová
SSD 256GB Samsung SM961 m2 NVME (960 PRO) nové
Zdroj Fortron 600W 80 Plus Bronze
Skříň MSI Mag Vampiric RGB s pruhlednou bocnici - nové
Chladic AMD Wraith Prism RGB - nové
Sada 3xRGB vetracku nové

Jeste k tomu realnemu pocitani, zkousim ted gfn 22 a do toho pocitam wcg na vsech jadrech i mt. V.kliber psal, ze kdyz si gpu ukol sezere v boin jeste navi napr. 0.241 cpu tak pak na cpu uz se bude pocitat jen 11 ukolu. Jenze me se pocita na cpu co ma 12 vlaken 12 ukolu a jeste to krmi tu 0.241 gpu ulohu. Nevim jestli je to ok.... slo by nejak treba pres konfig radsi nastavit/omezi aby na cpu jelo jen 11 ukolu a zbyle cele jadro bylo pro gpu? Nemyslim ze to resi nastaveni boinc, kde je kolik jader se ma pouzivat..... snad jsem byl srozumitelny

[Honza1616]

slo by nejak treba pres konfig radsi nastavit/omezi aby na cpu jelo jen 11 ukolu a zbyle cele jadro bylo pro gpu? Nemyslim ze to resi nastaveni boinc, kde je kolik jader se ma pouzivat..... snad jsem byl srozumitelny

Kód: Vybrat vše

<app_config>
   <app>
      <name>xxxxxx</name>
      <max_concurrent>yyy</max_concurrent>
      <fraction_done_exact/>
   </app>
</app_config>

místo xxx si dosaď svůj projekt a místo yyy dosaď maximální počet běžících úkolů
celé to ulož do složky s projektem který chceš omezit a pojmenuj app_config.xml
nebo v boincu nastav v předvolbách omezit použití xx% CPU třeba na 95% a jeden úkol se ti vypne protože Boinc bude používat 11 jáder

[Albert]

Je to spocitany, vychazi to na 11200 Kc, nize je rozpis vsech komponent:
CPU E5 2660 V3 3.3GHz Turbo Boost
RAM Crucial Ballistix 16GB (4x4GB)- nové
MB Intel C612, Sata 3, USB 3, m.2 NVME - nová
SSD 256GB Samsung SM961 m2 NVME (960 PRO) nové
Zdroj Fortron 600W 80 Plus Bronze
Skříň MSI Mag Vampiric RGB s pruhlednou bocnici - nové
Chladic AMD Wraith Prism RGB - nové
Sada 3xRGB vetracku nové

C612 je čipová sada, ale jak se jmenuje ta deska?

[Dzordzik]

Mam jeden dotaz chci si koupit na bazaru starsiho xeona 2660 v3... ale resim jake pameti do nej... podle me by mohlo stacit 4x4 ale nevim jestli je nutne ecc ci nikoli pro ucely nasich vypoctu.... muzete nekdo poradit?

Jakou budeš mít základní desku?

Je to spocitany, vychazi to na 11200 Kc, nize je rozpis vsech komponent:
CPU E5 2660 V3 3.3GHz Turbo Boost
RAM Crucial Ballistix 16GB (4x4GB)- nové
MB Intel C612, Sata 3, USB 3, m.2 NVME - nová
SSD 256GB Samsung SM961 m2 NVME (960 PRO) nové
Zdroj Fortron 600W 80 Plus Bronze
Skříň MSI Mag Vampiric RGB s pruhlednou bocnici - nové
Chladic AMD Wraith Prism RGB - nové
Sada 3xRGB vetracku nové

Jeste k tomu realnemu pocitani, zkousim ted gfn 22 a do toho pocitam wcg na vsech jadrech i mt. V.kliber psal, ze kdyz si gpu ukol sezere v boin jeste navi napr. 0.241 cpu tak pak na cpu uz se bude pocitat jen 11 ukolu. Jenze me se pocita na cpu co ma 12 vlaken 12 ukolu a jeste to krmi tu 0.241 gpu ulohu. Nevim jestli je to ok.... slo by nejak treba pres konfig radsi nastavit/omezi aby na cpu jelo jen 11 ukolu a zbyle cele jadro bylo pro gpu? Nemyslim ze to resi nastaveni boinc, kde je kolik jader se ma pouzivat..... snad jsem byl srozumitelny :)

Ten Xeon je co zač, předpokládám nějaký dovoz z Ebaye. Podle ceny komponent co vybíráš asi nějaký ES, je to tak? Nejsem si jistý jestli zrovna na PG, dke jde o stabilitu je ES, kde nemáš jistotu toho že jde o finální návrh čipu, výhra? Může být, že to je finální stepping, ale raději bych si to být tebou před nákupem ověřil výpisem z CPU-Z.

[® Plšák Ráďa ®]

Zdroj Fortron 600W 80 Plus Bronze

To jako myslíš vážně s tím zdrojem? Míním tu certifikaci BRONZE. Můj názor je takový, co je pod GOLD certifikaci pro BOINC výpočty docela nevhodné. Podívej se minimálně na GOLD, se ti to vrátí zpátky v podobě ušetřené spotřeby elektriky.

[Albert]

Ten Xeon je co zač, předpokládám nějaký dovoz z Ebaye. Podle ceny komponent co vybíráš asi nějaký ES, je to tak? Nejsem si jistý jestli zrovna na PG, dke jde o stabilitu je ES, kde nemáš jistotu toho že jde o finální návrh čipu, výhra? Může být, že to je finální stepping, ale raději bych si to být tebou před nákupem ověřil výpisem z CPU-Z.

U ES bych žádné potíže se stabilitou neočekával.

[Dzordzik]

Nejde jenom o stabilitu, jde hlavně o frekvence, kterých CPU dosahují, často bývají výrazně nižší než produkční kusy. ES je vzorek, který slouží pouze k testům a pro ladění software, není to kus, který má jít do prodeje a s chybami a menším výkonem se u něj počítá.

[Albert]

Nejde jenom o stabilitu, jde hlavně o frekvence, kterých CPU dosahují, často bývají výrazně nižší než produkční kusy. ES je vzorek, který slouží pouze k testům a pro ladění software, není to kus, který má jít do prodeje a s chybami a menším výkonem se u něj počítá.

Vím co je ES (QS). Nižší frekvence je naopak ku prospěchu stability. S chybami se u něj moc nepočítá, to je úplná rarita, když nějakou chybu mají. Ale hlavně mají ekonomický smysl.

[Dzordzik]

Nejde jenom o stabilitu, jde hlavně o frekvence, kterých CPU dosahují, často bývají výrazně nižší než produkční kusy. ES je vzorek, který slouží pouze k testům a pro ladění software, není to kus, který má jít do prodeje a s chybami a menším výkonem se u něj počítá.

Vím co je ES (QS). Nižší frekvence je naopak ku prospěchu stability. S chybami se u něj moc nepočítá, to je úplná rarita, když nějakou chybu mají. Ale hlavně mají ekonomický smysl.

Já vím jaký je rozdíl mezi ES a QS. I to že se prodávají za zlomek běžné ceny, protože se prodávat nesmí. Obě verze jsou vlastnictvím Intelu. To že se s nimi šmelí je věcí druhou. Ale to že u ES/QS CPU je nižší frekvence ku prospěchu stability je nesmysl. Ty CPU mají nižší frekvence ne z toho důvodu, že by byly kvůli tomu stabilnější ale proto, že ještě není doladěný výrobní proces a ty CPU prostě na svojí finální frekvenci při daném TDP prostě běžet nezvládnou. Není to plnohodnotné CPU se zaručenou stabilitou, ani s delkarovaným výkonem. Je to prostě testovací vzorek určený k hledání chyb a problémů, nic víc nic míň.

[Albert]

Já vím jaký je rozdíl mezi ES a QS. I to že se prodávají za zlomek běžné ceny, protože se prodávat nesmí. Obě verze jsou vlastnictvím Intelu. To že se s nimi šmelí je věcí druhou. Ale to že u ES/QS CPU je nižší frekvence ku prospěchu stability je nesmysl. Ty CPU mají nižší frekvence ne z toho důvodu, že by byly kvůli tomu stabilnější ale proto, že ještě není doladěný výrobní proces a ty CPU prostě na svojí finální frekvenci při daném TDP prostě běžet nezvládnou. Není to plnohodnotné CPU se zaručenou stabilitou, ani s delkarovaným výkonem. Je to prostě testovací vzorek určený k hledání chyb a problémů, nic víc nic míň.

QS jsou plnohodnotné a na max. frekvenci samozřejmě běžet zvládnou. Intel ale omezuje max frekvenci, aby o ně byl menší zájem, nic víc. Jejich primární úkol je ladit s nimi související hardware, tedy převážně prototypy nových základních desek.
Prošlo mi jich rukama celkem dost, bez jediné chyby. Na PG je také používá nemálo uživatelů a bez problémů.
Právě jsem koupil Xeon 8260 QS a uvidím jestli najdu nějakou slabou stránku ...