WCG - THOR Challenge

Ostatní - diskuse
Odpovědět
Zpráva
Autor
Leto
10.5263157895 %
10.5263157895 %
Příspěvky: 66
Registrován: úte 02 čer, 2009 18:00
ID CNT statistics: 19477

Re: WCG - THOR Challenge

#221 Příspěvek od Leto »

Řekl bych nejenom odevzdané, ale i zvalidované. Navíc jelikož je zde hlavní hodnocenou veličinou čas, je tento turnaj, resp. jeho úvodní kola velmi specifické. Nezáleží zde totiž na počtu odevzdaných jednotek ani na rychlosti jejich zpracování, nýbrž čistě na čase, po který výpočty běží.
Proto se s tím, jak byl nedávno spuštěn projekt OPN1, otevřela velmi cenově zajímavá možnost, jak si pomoci k dosažení dříve nedostižných medailí odvislých od času, po který běží výpočty. Projekt OPN1 totiž lze provozovat i na ARM CPU a tedy i na vybraných jednodeskových PC s vícejádrovými CPU. Momentálně mi 24/7 běží 1x RPi 4B (4 jádra) a 1x Odroid-XU4 (4+4 jádra), tedy celkem 12 jader. Jak pořizovací náklady, tak provozní náklady jsou relativně nízké ve srovnání se standardními stolními PC. Bohužel i skutečný výkon tomu odpovídá, neboť jak RPi, tak Odroid dosahuje RAC do cca 1000. V tomto případě mi to však až tak nevadí, protože každý den získám do statistik cca 11 dní (=12 jader 24/7 mínus rozdíl reálného času a procesorového času), za měsíc je to necelý rok. Věda na tom bohužel až tak nevydělá, ale pořád si říkám, že nějaké odevzdané výsledky jsou lepší než žádné. Takže pokud byste chtěli "posílit" do tohoto specifického turnaje nebo třeba prahnete po nějaké z diamantových medailí a "konvenčními" prostředky byste neměli takřka šanci se dočkat, tak to můžete zkusit i takto.

Uživatelský avatar
RoKro
47.3684210526 %
47.3684210526 %
Příspěvky: 1010
Registrován: pon 31 srp, 2009 08:57
rok narození: 29 črc 1970
ID CNT statistics: 10234
Bydliště: Beroun
Kontaktovat uživatele:

Re: WCG - THOR Challenge

#222 Příspěvek od RoKro »

Leto píše: pon 14 zář, 2020 18:27 Řekl bych nejenom odevzdané, ale i zvalidované.
Jasně, měl jsem na mysli, že nemusí být stažené teprve až v době turnaje, jako u PrimeGridu, takže se dá předpočítávat. Dík za potvrzení.
Leto píše: pon 14 zář, 2020 18:27 Navíc jelikož je zde hlavní hodnocenou veličinou čas, je tento turnaj, resp. jeho úvodní kola velmi specifické. Nezáleží zde totiž na počtu odevzdaných jednotek ani na rychlosti jejich zpracování, nýbrž čistě na čase, po který výpočty běží.
Tohle se mi na tom právě nelíbí. Jasně, je to závod, jsou to nějaká pravidla, jsou pro všechny stejná, ale já DC počítám proto, abych něco spočítal, abych dodal nějaké výsledky, ne abych natočil "motohodiny". Ale svým způsobem se toho účastním taky, na turnaj mám zapnutý hyperthreading, takže mi hodiny sice naskakují na 12 vláknech, ale reálný výkon stále odpovídá +/- těm šesti fyzickým jádrům mého CPU.
Obrázek

Leto
10.5263157895 %
10.5263157895 %
Příspěvky: 66
Registrován: úte 02 čer, 2009 18:00
ID CNT statistics: 19477

Re: WCG - THOR Challenge

#223 Příspěvek od Leto »

Souhlasím, také se mi to hodnocení u WCG moc nelíbí a nikdy jsem úplně nepochopil, proč si zvolili čas, jako "motivační" složku. Osobně také preferuji maximalizaci přínosu vědě (v rámci mých velmi omezených možností). Mám pouze teorii, že to ve WCG berou právě tak, že motivují počtáře, aby se zapojili bez ohledu na jejich výpočetní možnosti. Prostě ať už máš jakýkoliv stroj, je pro WCG podstatné, že svůj čas věnuješ jim.
Každopádně je WCG můj hlavní projekt, který počítám tak jako tak, a přiznávám, že jsem si chtěl aspoň na 1 podprojektu nahnat nějakou hezčí medaili, takže jsem své ARMy takto využil. Využití pro tento turnaj je tak další malý bonus. Když to převedu do statistiky (lehce sobecky, byť si to opravdu takto nechci připisovat), tak ty 2 ARM-PC "vytáhly" náš tým o tu 1 pozici na 9. místo (za týden dají nějakých 75-80 dnů). Pokud bychom se pak dostali do té Pure fáze, tak tam to už samozřejmě bude o něčem jiném - o bodech, kde naopak o výsledku bude rozhodovat skutečný výkon, který sice preferuji, ale bohužel jím moc nepřispěji...

Uživatelský avatar
Deathlike
5.26315789474 %
5.26315789474 %
Příspěvky: 29
Registrován: pon 15 dub, 2019 15:05
rok narození: 22 pro 1991
ID CNT statistics: 12176
Bydliště: Ústí nad Labem

Re: WCG - THOR Challenge

#224 Příspěvek od Deathlike »

:smt100 jestli de teda předpočítávat, neví někdo adresu toho scheduleru? :smt100
PC1 - AMD Ryzen 7 1700x, Asus Crosshair VI Hero, 2x 16GB Corsair DDR4 2666MHz, Gigabyte GTX1080ti 11GB Aorus, Corsair Force MP500 240GB M2 SSD, Corsair RM1000i, Win 10 - DC a hry
PC2 - AMD FX8350, Asus Crosshair V Formula Z, 2x8GB Zeppelin DDR3 1333MHz (OC 1600MHz), Gigabyte GTX970 G1 Gaming 4GB, Asus Expedition RX570 4GB, Patriot Burst 240GB SSD, Corsair RM850x, Win 7 - čistě DC
PC3 - AMD Phenom II X4 840, Asus Sabertooth 990FX, 8GB Geil Evo Leggera DDR3 1600MHz, Gigabyte GT610 HD Experience 1GB, Samsung 320GB HDD, Corsair VS450, Ubuntu 20.04 LTS - čistě DC (wep m+2)
:smt077 a budou další... :smt024

Uživatelský avatar
® Plšák Ráďa ®
47.3684210526 %
47.3684210526 %
Příspěvky: 1140
Registrován: čtv 10 led, 2013 00:41
rok narození: 0- 7-1977
ID CNT statistics: 15767

Re: WCG - THOR Challenge

#225 Příspěvek od ® Plšák Ráďa ® »

Závora hosts (windows)

# =========================================
# ========== World Comunity Grid ==========
0.0.0.0 scheduler.worldcommunitygrid.org
0.0.0.0 worldcommunitygrid.org

(dole musí být vždy prázdný řádek) 22rrr

PS: nevím proč se čertíte nad odznáčky podle času, kdyby neexistovala služba pro seznam badgetů, viz. spodní část mého příspěvku, tak se k těm odznáčkům, kdo jaký má ani nedostanete. Něco jiného jsou jiné projekty a jejich klasická stránka se statistiky v jednotlivých projektech, kde vidíte kdo co nasbíral. Snad máte pravdu, že se hrotí v Thoru čas práce, což právě toto soutěžení je dosti napadnutelné. Jsou způsoby, jak počítat více jednotek, než je omezení přes počet vláken CPU v BOINCu. Já tohle nikdy neprovozoval, abych nahnal snadno odznáčky, mám to spočítaný vše poctivě. Bohužel kde je možnost podvádění možná, vždy se najde nějaký tajtrdlík co to zneužije. Začalo to SETI clasicem a končí WCG navýšením počtu vláken v BOINCu. Proto by to mělo být v množství odevzdaných validních prací a ne časem.
Naposledy upravil(a) ® Plšák Ráďa ® dne pon 14 zář, 2020 20:23, celkem upraveno 1 x.
Motto: "Pokrok vědy nezastavíš, ale i ty ho můžeš urychlit." © 2014 Plšák Ráďa User of The Day
Obrázek

Uživatelský avatar
Deathlike
5.26315789474 %
5.26315789474 %
Příspěvky: 29
Registrován: pon 15 dub, 2019 15:05
rok narození: 22 pro 1991
ID CNT statistics: 12176
Bydliště: Ústí nad Labem

Re: WCG - THOR Challenge

#226 Příspěvek od Deathlike »

® Plšák Ráďa ® jasný, děkuju mockrát 45hh :smt023
PC1 - AMD Ryzen 7 1700x, Asus Crosshair VI Hero, 2x 16GB Corsair DDR4 2666MHz, Gigabyte GTX1080ti 11GB Aorus, Corsair Force MP500 240GB M2 SSD, Corsair RM1000i, Win 10 - DC a hry
PC2 - AMD FX8350, Asus Crosshair V Formula Z, 2x8GB Zeppelin DDR3 1333MHz (OC 1600MHz), Gigabyte GTX970 G1 Gaming 4GB, Asus Expedition RX570 4GB, Patriot Burst 240GB SSD, Corsair RM850x, Win 7 - čistě DC
PC3 - AMD Phenom II X4 840, Asus Sabertooth 990FX, 8GB Geil Evo Leggera DDR3 1600MHz, Gigabyte GT610 HD Experience 1GB, Samsung 320GB HDD, Corsair VS450, Ubuntu 20.04 LTS - čistě DC (wep m+2)
:smt077 a budou další... :smt024

Uživatelský avatar
® Plšák Ráďa ®
47.3684210526 %
47.3684210526 %
Příspěvky: 1140
Registrován: čtv 10 led, 2013 00:41
rok narození: 0- 7-1977
ID CNT statistics: 15767

Re: WCG - THOR Challenge

#227 Příspěvek od ® Plšák Ráďa ® »

Mám jen tyhle závory v hostu, podle potřeby, jiný projekty tam nemám jelikož je nepočítám. 45hh Tak si to někam ulož nebo zkopíruj do hosts a podle potřeby tam vymaž si křížek na začátku adresy. Jsem si to vytvočil takto, abych se v tom snadno vyznal a aby se mi to nějak nerušilo navzájem. Zdar. 22rrr

# =========================================
# ========== World Comunity Grid ==========
# 0.0.0.0 scheduler.worldcommunitygrid.org
# 0.0.0.0 worldcommunitygrid.org

# =========================================
# =============== Einstein ===============
# 0.0.0.0 scheduler.einsteinathome.org
# 0.0.0.0 einsteinathome.org
# 0.0.0.0 einstein4.einsteinathome.org
# 0.0.0.0 einstein10.einsteinathome.org

# =========================================
# =============== Asteroids ===============
# 0.0.0.0 asteroidsathome.net
# 0.0.0.0 project1.asteroidsathome.net

# =========================================
# =============== Universe ================
# 0.0.0.0 universeathome.pl

# =========================================
# ============= Number fields =============
# 0.0.0.0 numberfields.asu.edu
# 0.0.0.0 mimas.asu.edu
# 0.0.0.0 asu.edu

# =========================================
# =============== Amicable ================
# 0.0.0.0 sech.me

# =========================================
# =============== Collatz =================
# 0.0.0.0 boinc.thesonntags.com
Motto: "Pokrok vědy nezastavíš, ale i ty ho můžeš urychlit." © 2014 Plšák Ráďa User of The Day
Obrázek

Uživatelský avatar
Deathlike
5.26315789474 %
5.26315789474 %
Příspěvky: 29
Registrován: pon 15 dub, 2019 15:05
rok narození: 22 pro 1991
ID CNT statistics: 12176
Bydliště: Ústí nad Labem

Re: WCG - THOR Challenge

#228 Příspěvek od Deathlike »

® Plšák Ráďa ® ok, dík :-D
já sem to měl uložený z posledního pentathlonu, teda bez wcgčka, ale jaksi mi to někam zmizlo... :smt102
doteď sem to neřešil, ale když se dá předpočítávat... 45hh
každopádně ještě jednou děkuju i za ten zbytek, bude se hodit 33ttt
Naposledy upravil(a) Deathlike dne pon 14 zář, 2020 21:29, celkem upraveno 1 x.
PC1 - AMD Ryzen 7 1700x, Asus Crosshair VI Hero, 2x 16GB Corsair DDR4 2666MHz, Gigabyte GTX1080ti 11GB Aorus, Corsair Force MP500 240GB M2 SSD, Corsair RM1000i, Win 10 - DC a hry
PC2 - AMD FX8350, Asus Crosshair V Formula Z, 2x8GB Zeppelin DDR3 1333MHz (OC 1600MHz), Gigabyte GTX970 G1 Gaming 4GB, Asus Expedition RX570 4GB, Patriot Burst 240GB SSD, Corsair RM850x, Win 7 - čistě DC
PC3 - AMD Phenom II X4 840, Asus Sabertooth 990FX, 8GB Geil Evo Leggera DDR3 1600MHz, Gigabyte GT610 HD Experience 1GB, Samsung 320GB HDD, Corsair VS450, Ubuntu 20.04 LTS - čistě DC (wep m+2)
:smt077 a budou další... :smt024

Uživatelský avatar
Abby
42.1052631579 %
42.1052631579 %
Příspěvky: 734
Registrován: pát 08 pro, 2017 21:24
ID CNT statistics: 26303

Re: WCG - THOR Challenge

#229 Příspěvek od Abby »

To počítání "na čas" jsem ne zcela pochopila. Znamená to, že na svém Ryzenu 3600 (12 vláken) můžu stáhnout procesorový čas na 10% (teď mám 90%) a výsledek bude stejný? Prostě se bude počítat na 12 vláknech 24/7, jen pomaleji, ale ve skutečnosti se mi započítá stejný čas, jako když mám teď nastaveno 90% 12 vláken 24/7 a bude to mít výhodu v menší spotřebě?

Dzordzik
57.8947368421 %
57.8947368421 %
Příspěvky: 2413
Registrován: ned 12 úno, 2017 00:26
rok narození: 18 zář 1980
ID CNT statistics: 503
Bydliště: Zdounky (u Kroměříže)
Kontaktovat uživatele:

Re: WCG - THOR Challenge

#230 Příspěvek od Dzordzik »

Ne. Pokud si nastavíš, aby pro BOINC připadl jenom např. 10% CPU času, tak z každých 10s se bude 1s počítat pro BOINC a 9s bude CPu volné pro systém a jiné aplikace. Samozřejmě započítaný čas pro projekt bude roven tomu, kolik si pro BOINC skutečně počítala. To že ti klesne spotřeba je jasné, protože zátěž CPU bude proti nastavení na 100% desetinová.
Albert: Dual Xeon E5-2696 V4, Supermicro X10DRG-Q, 64GB DDR4 ECC, 1x GTX 1070, Enermax Platimax 1700W

Uživatelský avatar
Abby
42.1052631579 %
42.1052631579 %
Příspěvky: 734
Registrován: pát 08 pro, 2017 21:24
ID CNT statistics: 26303

Re: WCG - THOR Challenge

#231 Příspěvek od Abby »

Aha, tak to jsem fakt pochopila špatně. Já mám normálně nastaveno těch 10% a pro turnaj jsem to zvedla na 90%. Ovšem 10% mám nastaveno trvale zatímco 90% respektuje prioritní aplikace a zatížení, takže ve skutečnosti nepočítá 24/7 ale jen cca 6-12/7 maximálně (10% mě neomezuje ani ve hrách, 90% logicky ano), takže mě tak napadlo, že možná bude výhodnější to nechat na těch 10% :-)

Leto
10.5263157895 %
10.5263157895 %
Příspěvky: 66
Registrován: úte 02 čer, 2009 18:00
ID CNT statistics: 19477

Re: WCG - THOR Challenge

#232 Příspěvek od Leto »

@Abby: To si nejsem úplně jistý, tady asi řeknou zkušenější, ale mám takový dojem, že tím časem se u WCG rozumí procesorový, nikoliv reálný. Tudíž tenhle postup (90->10) by tuším nepomohl, ale nemám to odzkoušené. Sám mám na stolním PC nastaveno 75 % jader (9 z 12) se 100 % procesorovým časem. Na WCG pomáhají samotná jádra, resp. vlákna, jak psal např. RoKro. Výpočet s HT se prodlouží cca na dvojnásobek, ale práce se za ten samý čas odvede stejně jako s vypnutým HT.
Např. mám 6 jader, task na něm trvá 4 hodiny, za 24 hodin tak udělám 6x(24/4)=36 tasků. Pustím HT, mám 12 vláken, task na nich trvá 8 hodin, za 24 hodin udělám 12x(24/8)=36 tasků. Ale v prvním případě do statistik WCG dostanu 6x24 = 144 hodin = 6 dní, naproti tomu ve druhém případě dostanu 12x24 = 288 hodin = 12 dní. Samozřejmě zjednodušeně řečeno, protože reálný čas != procesorový čas, takže do statistik to bude o trochu méně, než 6, resp. 12 dní.
Proto platí čím víc jader/vláken + provoz 24/7, tím lepší výsledek v turnajích, kde je hodnocen čas, a proto se mohou vyplatit i relativně nevýkonné ARM PC. Ale z vědeckého hlediska dávají zase zanedbatelný výkon.

Tak koukám, že už mě s vysvětlením předběhl Dzordzik 22rrr
Naposledy upravil(a) Leto dne pon 14 zář, 2020 22:03, celkem upraveno 1 x.

Uživatelský avatar
Abby
42.1052631579 %
42.1052631579 %
Příspěvky: 734
Registrován: pát 08 pro, 2017 21:24
ID CNT statistics: 26303

Re: WCG - THOR Challenge

#233 Příspěvek od Abby »

Ufff :-D No, já HT resp. SMT používám a vypínat ho nechci, má reálný přínos v programech, které používám. Jde mi vlastně teď jen o to, jestli by nebylo výhodnější 10% procesorového času skutečně 24/7 než podstatně méně při 90%, protože drtivá většina programů je nastavená jako prioritní (hry, zpracování videa a fotek) a výpočet se při jejich běhu pozastaví, zatímco při 10% běží stále a nijak znatelně mě neomezuje (Handbrake, Vegas Movie a všechny aktuální hry vlastně neomezuje vůbec). A tyhle programy běží v podstatě po většinu času během dne, ono možná těch 90% neběží ani těch 12 hodin, ale spíš jen těch 6...

To by asi bylo zajímavé nasimulovat z 12 vláken na víc :-D Ale já to stejně počítám protože věřím v reálný přínos a asi bych neměla radost z nepoctivě získaného odznáčku :-)

4bc3
15.7894736842 %
15.7894736842 %
Příspěvky: 131
Registrován: pon 04 bře, 2019 19:18
ID CNT statistics: 22943

Re: WCG - THOR Challenge

#234 Příspěvek od 4bc3 »

V pondělí startuje 2. kolo, tak by to chtělo nás přihlásit. Samo to nefunguje, do každého kola se sice kvalifikujeme, ale zase musíme pozvánku přijmout.
https://www.worldcommunitygrid.org/team ... geId=10238
Díky

Jinak tedy při stejném výkonu bychom měli mít další kolo zajištěné a tam to bude důležité zabrat (a to i předem se závorama) abychom se dostali do posledního kola mezi Top10.
Ovšem v době posledního kola Thor bude také další PG turnaj. Takže zabereme a budeme v Top10.

Uživatelský avatar
RoKro
47.3684210526 %
47.3684210526 %
Příspěvky: 1010
Registrován: pon 31 srp, 2009 08:57
rok narození: 29 črc 1970
ID CNT statistics: 10234
Bydliště: Beroun
Kontaktovat uživatele:

Re: WCG - THOR Challenge

#235 Příspěvek od RoKro »

Třetího kola se plánuji zúčastnit a snad i něco předpočítám, ale kdybychom se náhodou dostali do čtvrtého, tak na rovinu říkám, že budu preferovat PG turnaj, který je i na úrovni týmu odhlasován jako prioritní záležitost.
Obrázek

Dzordzik
57.8947368421 %
57.8947368421 %
Příspěvky: 2413
Registrován: ned 12 úno, 2017 00:26
rok narození: 18 zář 1980
ID CNT statistics: 503
Bydliště: Zdounky (u Kroměříže)
Kontaktovat uživatele:

Re: WCG - THOR Challenge

#236 Příspěvek od Dzordzik »

Zůčastním se všech kol do kterých se kvalifikujeme.
Albert: Dual Xeon E5-2696 V4, Supermicro X10DRG-Q, 64GB DDR4 ECC, 1x GTX 1070, Enermax Platimax 1700W

Uživatelský avatar
Abby
42.1052631579 %
42.1052631579 %
Příspěvky: 734
Registrován: pát 08 pro, 2017 21:24
ID CNT statistics: 26303

Re: WCG - THOR Challenge

#237 Příspěvek od Abby »

Já se zůčastním jen wcg, už ani v klientovi nic jiného nemám, i rosettu už jsem odstranila.

4bc3
15.7894736842 %
15.7894736842 %
Příspěvky: 131
Registrován: pon 04 bře, 2019 19:18
ID CNT statistics: 22943

Re: WCG - THOR Challenge

#238 Příspěvek od 4bc3 »

Tak koukám, že už jsme zaregistrovaní, tak hurá a díky adminovi. :smt023
Já jsem chtěl jen poznamenat, že na konci je jemná kolize. Nechtěl jsem znovu řešit co je lepší počítat.
Za mě max. úsilí ve 3. kole Thor, abychom prošli do Top10. Pak týden předpočítávat, vysypat to 19.10. a počítat celý den až do rána 20.10. a pak honem na PG, který je samozřejmě Týmovou prioritou a začíná 20.10. 8:00 ráno.
Osobní priority jsou různé a každý je má jiné.

Uživatelský avatar
Abby
42.1052631579 %
42.1052631579 %
Příspěvky: 734
Registrován: pát 08 pro, 2017 21:24
ID CNT statistics: 26303

Re: WCG - THOR Challenge

#239 Příspěvek od Abby »

Já budu počítat WCG i když mám minimální přínos, i když většina přejde na PG. Ale snad aspoň trochu pomůžu.

Uživatelský avatar
vkliber
Admin webu a fóra CNT
Admin webu a fóra CNT
Příspěvky: 10055
Registrován: čtv 29 bře, 2007 10:41
ID CNT statistics: 1
Bydliště: Brušperk, 48 let
Kontaktovat uživatele:

Re: WCG - THOR Challenge

#240 Příspěvek od vkliber »

Tak jsem teď zpoza závory vyklopil 64 days Run Time 22rrr .
Statistiky CNT | Projekty CNT | Distribuované výpočty CNT | SETI CNT | Einstein CNT
.....::::: Proč se mít nejlépe, když se můžu mít čím dál tím stejně :::::.....
Moje skromná statistika tady , tady , tady nebo grafy.
˙ıɔıqɐɹʞ ʌ ǝןɐ 'ıןʇʎd ʌ ǝɔıɾɐz ǝʇɾndnʞǝu ʎpʞıu ˙˙˙

Odpovědět

Zpět na „Ostatní“