PG Turnaj 2023 - testy a nastavení

[forest]

Jak jste se jistě dočetli ve vedlejším tématu, tak část výkonných počítačů v majetku týmu nebude v novém ročníku v provozu. Bivoje jsme prodali, protože původní adoptující již prodloužit úhradu provozu za výpočty na jeho účet nechtěl. Nikdo noví se k němu nepřihlásil. Zároveň se jednalo o již nejméně efektivní stroj. Nový stroj bylo v plánu z utržených peněz pořídit, ale několik členů rovněž adopci na přelomu roku ukončilo a tedy by tento nový počítač aktuálně neměl kdo financovat, respektive jeho provoz. Tedy máme o jeden stroj méně. Pokud se ale zájem opět zvedne a spotřeba bude zajímavá, tak můžeme další počítač pořídit. Peníze na to budou odložené.
Od ledna zůstaly nevyužité i další dva celé stroje CPU+1xGPU. Zbylý HW vypadá, že minimálně do pololetí zajištěný finančně je.

Z důvodu nemalých investic, které do nákupu nových dílů a rekonstrukce strojů společnost od roku 2021 investovala a toho, jak velký podíl celkového týmového výkonu včetně turnajů odváděli v roce 2022 právě tyto počítače, se vedení týmu rozhodlo, provoz nevyužitého/neadoptovaného HW v roce 2023 uhradit z financí CNT o.p.s. Pojedou jen na turnaje PG a Pentathlon.
Body se budou načítat na účty původních počítačů CIMRMAN a IQE. Pokud se někdo během roku k adopci některého HW přihlásí (můžete jen CPU, jen GPU, nebo kombinace), tak danou část financování provozu týmového HW ukončime a hradit ji bude nový provozovatel. Předpoklad je, že stroje pojedou v tomto režimu kolem 90 dní a tedy částka na jejich provoz bude kolem 12.000,-Kč. Pokud by na to chtěl někdo přispět, budeme rádi.

Věříme, že tímto opatřením si tým udrží vysokou konkurenceschopnost v mezinárovních vodách a zároveň HW využijeme, než se ekonomika a ceny energiií zlepší.

Foreste, je prosím ještě nějaký z těch odpočívajících strojů k dispozici? Byla by škoda nechat je morálně zastarávat.... Rád bych jeden adoptoval na 1 rok (s výjimkou doby soutěží, kterých se tým účastní). Jde mi jen o CPU. Počítám WCG, konkrétně MCM. Díky a ať to v serverovně zase hučí Tomáš

Určitě je možné se domluvit pouze na adopci CPU a jen mimo turnaje PG a Pentathlon. Ozvu se ti po SZ, pošlu údaje k přihlášení k danému stroji a po aktuálním PG třídenním kole, by byl již CPU daného stroje tvůj

Moc díky všem za nové nabídky adopce. Toho vypnutého HW mě bylo také moc líto a jsem moc rád, že se to postupně opět vše oživuje
Ještě je volný celý jeden PC s CPU 5970X, grafickou kartou 3060Ti a 64GB RAM. V turnaji pojede, jak jsem uvedl, ale po turnaji jej budu muset zatím vypnout. Přihlásit se k jeho adopci může kdokoliv, i třeba jen k samotnému provozu CPU, nebo GPU.

[forest]

Výsledky testů obou CPU aplikací, mně vycházejí podobně. Pokud (jak píšete) jsou stejně ohodnocené, tak je to jedno, který projekt tam pustím. Na CPU AMD 5950X vychází nejvýhodněji 20 jednotek, každá na jednom vláknu.

Testoval jsem i GPU a CPU současně. Zjistil jsem, že CPU jednotky ani v tak vysokém počtu nebrzdí GPU výpočty.

Tedy na týmových strojích pojedeme PPS 20x1 na CPU a GPU GFN jednotky dle počtu grafik ve stroji.

[RoKro]

Jednotky těch dvou podprojektů nejsou ani zdaleka stejně ohodnocené. GFN17 je za 486 kreditů, PPS Mega za 306, velmi výjimečně za 361 kreditů. Je třeba k tomu při volbě podprojektu přihlédnout, pokud jde o maximalizaci kreditového zisku.

[RoKro]

obrázek_2023-01-22_101638887.png (252.09 KiB) Zobrazeno 1691 x

Co mě Foreste překvapilo na tom týmovém stroji, cos mi na něj dal přístup, je na jakých frekvencích a s jakým časováním jede paměť.
To je výsledek nějakého ručního přenastavení na nejlepší vyzkoušené hodnoty, nebo nějaká podivnost?
Protože to není ani žádné ze základních JEDEC nastavení ani žádný XMP profil. Ale je pravda, že už jsem asi 20 let neměl AMD, tak se to, třeba zvlášť u CPU s takovým počtem jader, dělá jinak, než jsem zvyklý z intelů. Ale zvědavost mi nedala se nezeptat...

[forest]

Jednotky těch dvou podprojektů nejsou ani zdaleka stejně ohodnocené. GFN17 je za 486 kreditů, PPS Mega za 306, velmi výjimečně za 361 kreditů. Je třeba k tomu při volbě podprojektu přihlédnout, pokud jde o maximalizaci kreditového zisku.

Aha, tak to jsem tu informaci špatně pochopil. Honza psal, že jsou obdobně náročné, tedy jsem si z toho chybně odvodil, že budou i shodně ohodnocené. Volba je tedy jasná = CPU i GPU pojedou na GFN 17.

Co se týče těch pamětí, tak ty můžeme vyladit i jinak. Už je to přecejen více než rok, co jsme tu sestavu skládali. S čistým svědomím neřeknu, zda je to to nejlepší, nebo zda vyšší takt byl nestabilní. Časování je na CL16, což je dobré, takt by měl být parametrově výše, to máš pravdu. Nyní při turnaji bych s tím ale raději nehýbal a nechal to na tom, jak to dlouhodobě jelo bez problémů.

Paměti každopádně můžeme vyměnit, pokud by byly brzdou stroje. Tyto byly použity z předešlých sestav.

[Albert]

Také jsem se na to před rokem ptal. Ty paměti jsou dosti staré, vzali se z nějakého týmového stroje. Úplně zásadní vliv to na rychlost výpočtů nemá, ale protože 5950X má pouze dva paměťové kanály, tak by si to upgrade zasloužilo. Procesor navíc musí dělit kmitočet směrem dolů, protože Infinity fabric by měl běžet na stejné frekvenci jako paměti.

[forest]

Co se týče toho nastavení pro turnaj, tak jsem na účtu nastavil "no-limit" a "1" v Multi-threading. Následně jsem v cc_configu omezil počet jader na 20. Jede to tedy na 20CPU+počet GPU dle grafik ve stroji. Dalo by se to případně redukovat i přímo v BM procentuelním využitím CPU. Stroje mají zapnuté HT, což je výhodnější.

[RoKro]

Paměti - jasně, teď do toho určitě nevrtat.

Nastavení výpočtů pro turnaj - dal jsem u té týmové mašiny v BM 63% procesorů a taky to počítá 20+1 jednotku.

[Honza]

Podobné jsem myslel ve smyslu délky jednotek, velikosti testovaných kandidátů, systémem certifikačních jednotek, a že jsou si PPS Mega a GFN 17 pravděpodobně nejpodobnější mezi všemi projekty na PG.
Určitě ne zaměnitelné.

V konkrétním případě se to může lámat, třeba kolem CPU cache.

[Honza]

A máme již první odevzdané výsledky, po 15 minutách více než tisíc plných jednotek.

[forest]

Zatím čtvrté místo a moc neztrácíme. Na start dobré, snad to ještě vylepšíme

[overtonesinger]

Žádnej problém. Moc rád na to přispěju = zaplatím to!

Kolik tedy stojí zajištění turnajového provozu těch zbylých ("osiřelých") strojů od teď až do konce března 2023 ?
(vyjma období od teď do konce února - na které už je jisté CPU a GPU adoptováno )

Díky moc za info.

Skvělé
I to zajištění turnajového provozu by byla velká pomoc. Finance na účtu společnosti mohou být kdykoliv petřebné, například na vadný HW,

[overtonesinger]

Tak jsem přepnul všechna CPU na GFN-17. Snad to bude víc efektivní na Intelu i na AMD.

[Boby_cze]

Jsou veci mezi nebem a zemi, ze nechapu proc mi jedno PC pocita jak GPU tak CPU a druhe pouze GPU pri stejnem nastaveni

[nenym]

Podal jsi zcela vyčerpávající popis nastavení a závěr je podle mého jednoznačný - chyba je někde mezi klábosnicí a opěradlem židle. Dokáži si přestavit několik kombinací parametrů, které uvedený jev způsobí. Některé jsem si vyzkoušel sám na sobě, jiné např. forest.

[forest]

Jsou veci mezi nebem a zemi, ze nechapu proc mi jedno PC pocita jak GPU tak CPU a druhe pouze GPU pri stejnem nastaveni

Vymaž všechny GPU jednotky a nastav zásobu na 10+10 dní. Jistě se ti stáhne na toho 1+1/2 dne dostatek CPU jednotek

[Honza]

Než tlačit nesmyslně cache nadoraz a zbytečně zatěžovat server, tak je lepší se podívat do Event logu BOINCu přes Ctrl+E.
Většinou tam je řešení...

Kdyby to jo nešlo, tak je také možnost mít jeden BOINC na CPU a druhý na GPU.

[forest]

Ono to není nesmyslné a projekt si za to může v podstatě sám. Jak zmiňuje nenym, stejný problém jsem s ním probíral koncem minulého roku a narazil na něj na jednom stroji i nyní. Je to dáno tím, že soutěžíme na GPU i CPU. Jediné co projekt umožní, je nastavení, kolik se má maximálně naráz počítat jednotek a na kolika každá CPU vláknech. Nijak ale nelze definovat zvlášť zásobu pro CPU a zvlášť GPU. Zásoba se stahuje po žádosti o práci nahodile a tedy se snadno může stát, že stroj naplní celkový limit zásoby jednotek pouze jednotkami pro GPU výpočty a další již stahovat nechce. Limit zásoby má totiž na daný projekt plný.

Jediné co pomůže, je to drsné promazání GPU jednotek v zásobě a doufat, že si postahuje lepší poměr CPU a GPU jednotek, případně zvednutí limitu zásoby. Což ale také nemusí pomoct, záleží co se stáhne. Nebo znáš nějaký fígl, jak si zásobu řídit zvlášť pro CPU a zvlášť pro GPU na PG?
Byl bych za to moc rád, alespoň bych to na strojích nemusel několikrát denně kontrolovat.

[RoKro]

Jen pro zajímavost a pro představu sem dávám, kolik GFN 17 jednotek která GPU z mojí stáje odevzdala za posledních 24 hodin nonstop provozu.

Kód: Vybrat vše

RTX 3080	625
RTX 3080 ti	479
RTX 3070	464
RTX 3060 ti	397
Radeon 5700 XT	200

[Honza]

Jediné co pomůže, je to drsné promazání GPU jednotek v zásobě a doufat, že si postahuje lepší poměr CPU a GPU jednotek, případně zvednutí limitu zásoby. Což ale také nemusí pomoct, záleží co se stáhne. Nebo znáš nějaký fígl, jak si zásobu řídit zvlášť pro CPU a zvlášť pro GPU na PG?
Byl bych za to moc rád, alespoň bych to na strojích nemusel několikrát denně kontrolovat.

Ano, dva BOINC klienty, už jsem to psal včera a několikrát dříve v minulých měsících/letech.
Pak si můžeš řídit jeden BOINC pro CPU a druhý pro GPU podle libosti.

Doporučoval jsem to v momentě, kdy bylo důležité odeslat výsledek první.
Tento scénář umožňoval mít přesně ten počet jednotek na CPU, aby zbytek nestál ve frontě.
A přesně ten počet jednotek na GPU...překvapivě aby zbytek nestál ve frontě.
Řeší to i problém poměru CPU a GPU jednotek, který jsi zmínil.
Řeší to i občasné zmatky BOINC klienta v oblsati scheduleru, pokud se používá mixovaný MT (např. 4x2 + 3x3) a/nebo paralelní výpočet více jednotek na GPU.
Řeší to i problém CPU z jednoho projektu, GPU z jiného projektu.
Z principu to lze použít i na potíže různých GPU značek v jednom stroji.
A nejspíše i další použití, které mě teď po ránu nenapadá.

(to, že se před dokončením jednotky stáhne až 3 minuty před další, není vina PG či jiného BOINC projektu, ale toho, jak je natvrdo zadrátován BOINC klient.)

Kdyby někdo brblal, že pak je to horší na správu, tak kdo řeší více strojů, toto rozhodně není překážka.
Navíc to jde ovládat z jednoho místa před BOINCTasks.

Vyzkoušet, pak hodnotit.