10. Pentathlon - Obecná diskuze a pokec

[forest]

Byl vyhlášen čtvrtý den oštěpu (NFS). Ignorujte ho a počítejte naplno dál Einstein (na všech GPU) a WCG (na všech CPU).

[forest]

Já mám každých cca 25 min. 21 úloh.

Hm mě 1080Ti počítá 3 kousky okolo 52 minut. Jakou verzi ovladače na to používáš nebo nejsou to 2080Ti? 4 kusy za 28 minut mi napočítá jen Vega 64 a 1 kus za asi 26 minut Polaris WX7100. Docela by mě zajímal výkon refreshlé Vegy v Radeon VII (ta je v DP 3x rychlejší než Vega 64), postřehl jsem lehce trollující koment v bočním panelu o téhle kartě.

Ovladace mám 4.řady, ale asi nic posledního. 2080ti jdou jen o malo rychlejší než 1080ti, nejlepší je RVII.

To ti tedy musím trochu oponovat. Bivoj dostal před pár dny dvě tyto nové zbraně a výsledky na 2080Ti (dvě jednotky za 19 minut) jsou podstatně rychlejší, než na 1080Ti 25minut za dvě jednotky). Je to nárůst výkonu o celou 1/4 na tomto projektu, se zachováním spotřeby.

[v.svantner]

U mě to tak není.

Vždy jedu 3 jednotky na GPU na všech pc.

Tak, kde mám 1080ti, to dá každých 26 min. várku, doma, kde mám 2080ti, ty 3 jednotky mám spočítané za cca 23 min.

Takže rychlejší, ale ne zase o tolik.

Einstein je jednoznačně doménou AMD, stačí se podávat do statistik nevýkonnějších pc a NV tam prostě nikde není: https://einsteinathome.org/cs/community/stats/hosts

[Albert]

Je to tak, Einstein Nvidiím moc nechutná, například Radeon VII jednotku udělá okolo šesti minut, mně ji Titan V chroupá okolo sedmi minut. Na druhou stranu, ten Titan nejede naplno (jen okolo 100W), takže ta aplikace pro něj není optimalizovaná.

[Czech Human]

To ti tedy musím trochu oponovat. Bivoj dostal před pár dny dvě tyto nové zbraně a výsledky na 2080Ti (dvě jednotky za 19 minut) jsou podstatně rychlejší, než na 1080Ti 25minut za dvě jednotky). Je to nárůst výkonu o celou 1/4 na tomto projektu, se zachováním spotřeby.

Jakou verzi ovladače Bivoj používá? Mě počítá 1080Ti 2 jednotky asi 32 minut a 3 zhruba 50

[Czech Human]

Je to tak, Einstein Nvidiím moc nechutná, například Radeon VII jednotku udělá okolo šesti minut, mně ji Titan V chroupá okolo sedmi minut. Na druhou stranu, ten Titan nejede naplno (jen okolo 100W), takže ta aplikace pro něj není optimalizovaná.

A co na titana použít app_config? Mě Vega 64 taky jednu jednotku prakticky GPU idluje na 25°C ale se 4 kousky naráz už zase topí pod kotel na 52°C přitom doba výpočtu je stejná jen z ní vypadnou 4 jednotky . Ty karty mají tolik výpočetních bloků, že to ten algoritmus patrně neumí naráz využít.

[Albert]

Je to tak, Einstein Nvidiím moc nechutná, například Radeon VII jednotku udělá okolo šesti minut, mně ji Titan V chroupá okolo sedmi minut. Na druhou stranu, ten Titan nejede naplno (jen okolo 100W), takže ta aplikace pro něj není optimalizovaná.

A co na titana použít app_config? Mě Vega 64 taky jednu jednotku prakticky GPU idluje na 25°C ale se 4 kousky naráz už zase topí pod kotel na 52°C přitom doba výpočtu je stejná jen z ní vypadnou 4 jednotky . Ty karty mají tolik výpočetních bloků, že to ten algoritmus patrně neumí naráz využít.

To jsem zkoušel. Jak dvě, tak tři jednotky. Bohužel to není lineární a čas rostl neúměrně nahoru, takže nejvyšší efektivita je právě pro tu jednu jednotku. Prostě více než 200 jednotek za den z něj vyrazit nejde .

[Czech Human]

Hm to je opravdu relativně bídný výkon na to jaké ta karta má možnosti. Já bych zkoušel jednotek 8 nebo 10 naráz . 200 jednotek napočítá i vega 64, radeon VII odhadem asi 600, být ten aplikační výkon 1:1 Titan V by měl schroupat okolo 1100 kousků. Budiž tvůrcům té aplikace omluvou že jádro jejich počtářů ji nepoužívá a aplikace je patrně napsaná primárně pro karty AMD...

[pestis]

rozchodil jsem dle místního návodu Einsteina na grafice INTEL Intel(R) HD Graphics 4600 (1629MB), počítá jednu jednotku docela dlouho a 62 kreditu je docela slabota.
p2030.20170414.G56.50+00.46.S.b6s0g0.00000_3527_0 404011352 11 May 2019 13:39:58 UTC 11 May 2019 14:22:33 UTC Completed and validated 2 518 19 62 Binary Radio Pulsar Search (Arecibo) v1.34 () windows_x86_64

[RoKro]

Mně to zas taková bída na nVidiích nepřipadá. Moje 2080 (bez ti) chroupe 2 jednotky naráz za 16 minut. To je 180 jednotek za den.

[Czech Human]

rozchodil jsem dle místního návodu Einsteina na grafice INTEL Intel(R) HD Graphics 4600 (1629MB), počítá jednu jednotku docela dlouho a 62 kreditu je docela slabota.
p2030.20170414.G56.50+00.46.S.b6s0g0.00000_3527_0 404011352 11 May 2019 13:39:58 UTC 11 May 2019 14:22:33 UTC Completed and validated 2 518 19 62 Binary Radio Pulsar Search (Arecibo) v1.34 () windows_x86_64

Tak cos čekal, že GPU s výkonem žehličky bude válcovat silnice jako pokládací linka? . 2518 sekund není zase tak špatné, je to pořád rychlejší než mnoho CPU, mě třeba s Epyc za kolem 30 000 s přijde asi 620 kreditů. Samo že kdyby se to násobilo na 64 jádrech tak to je za den taky nějaký bod (asi 114 000 = 33 velkých úloh denně) ale proti "velkým" GPU to je pořád málo, Epyc za den udělá výkon 3,5 hodiny Vega 64... Zase tým teď potřebuje každý bod a ta integrovaná grafika ti přinese výkon jako 1-2 CPU jádra navíc "zadarmo" tak bych to neodsuzoval, u HT čtyřjádra máš 25% výkonu navíc, 6jádra 16% a 8jádra 12,5%, a uvolněná jádra můžeš použít třeba na něco jiného.

[1scorpion]

můžete sem prosím někdo přihodit vzor app_config na Einsteina?

[Honza1616]

můžete sem prosím někdo přihodit vzor app_config na Einsteina?

Kód: Vybrat vše

<app_config>
<app>
<name>hsgamma_FGRPB1G</name>
<max_concurrent>6</max_concurrent>
<fraction_done_exact/>
<gpu_versions>
<gpu_usage>0.33</gpu_usage>
<cpu_usage>1</cpu_usage>
</gpu_versions>
</app>
<app>
<name>einsteinbinary_BRP4</name>
<max_concurrent>6</max_concurrent>
<fraction_done_exact/>
<gpu_versions>
<gpu_usage>0.33</gpu_usage>
<cpu_usage>.01</cpu_usage>
</gpu_versions>
</app>
</app_config>

[forest]

Aktuálně jsem o chlup na pátém místě na Eisnteinu, skvělá práce

[® Plšák Ráďa ®]

můžete sem prosím někdo přihodit vzor app_config na Einsteina?

Jiná varianta pro 2 GPU a 1 CPU 6/12 :
<app_config>
<app>
<name>hsgamma_FGRPB1G</name>
<fraction_done_exact/>
<max_concurrent>4</max_concurrent>
<gpu_versions>
<gpu_usage>0.5</gpu_usage>
<cpu_usage>1.25</cpu_usage>
</gpu_versions>
</app>
</app_config>

------------------------------------------------------------------------------------------

Stránky Cosmology nejde web, něco se chystá Asi nahodím udici na jednotky cosmology, ať jsem mezi prvními co je začne lovit.

[forest]

Jak tak čtu ty nároky LHC, tak se začínám docela děsit. Těch 14 strojů při takovém náporu asi neuživím na rychlosti bezdrátového připojení 33/3 Mbit/s (co jsem nyní naměřil) nebo to bude stačit? Smlouvu mám na 15 Mbps, ale více jak 25 ani poskytovatel nenabízí a jinou možnost asi ani nemám
Nikdy jsem rychlejší net neřešil, bo jsem ho k ničemu nepotřeboval.

[Honza1616]

Jak tak čtu ty nároky LHC, tak se začínám docela děsit. Těch 14 strojů při takovém náporu asi neuživím na rychlosti 33/3 Mbit/s, co jsem nyní naměřil, nebo to bude stačit?

natáhni si pár jednotek
a pozastavuj výpočty třeba na polovině/čtvrtině jednotek aby se rozpočítala další várka, a pak po chvíli ty pozastavené zase povol, at jsou hned ze začátku mezi jednotkami rozestupy,
jinak když by jsi dokončil várku tak by jsi ze stroje odesílal a stahoval xxx jednotek současně a stroj by taky mohl stát než by natáhl nové

když budeš mít mezi jednotkami časové rozestupy tak se ti bude uploadovat a následně stahovat vždy jen jedna jednotka a po chvíli za ní další 1 jednotka a za další chvíli zase 1 další jednotka, stroj nebudeš mít zasekaný na odesílání a stahování jednotek
ty 3 Mb na upload jsou docela tragický na dnešní dobu, i když já zase mám 10/10 Mb já zase rychlost stahování mám na úrovni před 10 lety

[Czech Human]

Já bych se toho tak nebál, jednak to bude dlouho trvat než se stáhne jednotka další a potom jich dost zkolabuje takže si ušetříš spoustu set MB uploadů Hlavně si načíst požadavky na hardware (hlavně virtualizace) anainstalovaný software + specifické verze v počítači, jak to není splněné tak ani nemá cenu si tím zaflákat linku... Já zase doufám že tenhle projekt pro skalní fyziky, co se při výpočtech raději ani nedotýkají case a mají trvalý pobyt v CESNETu nevyberou.

[® Plšák Ráďa ®]

Kdyby došlo na to nejhorší a výběr by byl LHC projekt, no a kdo říká, že je nutný počítat tu nejbrutalnější variantu , jsou tam přeci i jiné časově nenáročné varianty projektu na stahováni Jako dá se s předstihem to stáhnout, vždy se to dá smazat rychle a spolehlivě. Už zkušenosti s mazáním má zde jeden počtář a není to nic těžkého, i dítě to zvládne. vtip Stejně věřím, že vyjde Cosmology dávám tomu 75%, takže už jen vyčkávám na stažení 10 + 10 dní do zásoby co jsem si nastavil v BOINCu, přeci nenecháme konkurenci něco na počítání A když nebude vybráno Cosmology , tak si to spočítám až po turnaji, stejně tam chci nabrat bodíky

[Honza1616]

tak se mi dnes dopoledne podařilo rozchodit integrované GPU, stálo mě to sice aspoň jedny nervy, sledovat vás že vám chodí jednotky a mě stále ne,
a taky pár stovek možná i tisíc zrušených jednotek abych donutil server mi poslat novou zásobu včetně jednotek pro IGPU když jsem nevěděl která aplikace je generuje
a povedlo se
ale má to několik zvláštností,
musel jsem v biosu povolit integrované GPU na obou počítačích, neměla by být ve výchozím nastavení zapnutá ?
jako nemít dedikovanou tak nemám jak zobrazit BIOS .... ale povoloval jsem ji už před pár dny a tenkrát to nepomohlo a už vím proč....
další důvod proč mi server nedával práci, protože jsem neměl povolenou potřebnou apliakci, v návodech nebyla..., myslel jsem že jednotky pro integrované GPU jsou obsaženy v těch 2 zmíněných v návodu, no pak se divím že mi server nechce nic dát
takže je to úplně ta první

další věc je že boinc v záznamu událostí už psal že vyžaduje práci pro iGPU ale nedostal jsem ji protože jsem měl nějaké vlastní nastavení a bylo potřeba přepnout na Maximum,
že bych tam dal nějaké nastavení které zakazovalo iGPU jednotky aby se šetřil procesor pro CPU jednotky nejspíš,... hlavně že to začalo okamžitě posílat jednotky


dál mě trochu zaráží výkon HW,
například když pozastavím GPU výpočty, tak se zvýší a to o dost výkon CPU, jako jo, v configu Einsteina mám k aplikaci přiřazené 1 CPU na jednotku a na WCG jen 14, ale stejně mě to zaráží
i když config WCG omezím na třeba 9 WU aby byl CPU opravdu volný tak to stejné udělá to stejné co na screenu (červené značky), pozastavené GPU a zvýšený výkon CPU.... nejspíš i jediná CPU jednotka v procesoru dokáže vytížit "něco" co pak brzdí komunikaci s grafikami i integrovanou
a v opačném případě je to podobné, pozastavím CPU výpočty, respektive WCG a výkon GPU jednotek povyskočí o několik % (žluté značky)
https://ctrlv.cz/shots/2019/05/12/lMNP.png

↓↓↓tak jo toto byla blbost...↓↓↓
a třešnička na konec
Intel GPU je rychlejší než RTX2080ti
https://ctrlv.cz/shots/2019/05/12/Iizw.png
každopádně v mém případě je nejrychlejší na RTX počítat 1 jednotku a na Intel GPU aspoň 3, možná i víc