Ostatní diskuse k projektu Yoyo

Fórum o projektu
Odpovědět
Zpráva
Autor
Uživatelský avatar
forest
Admin webu a fóra CNT
Admin webu a fóra CNT
Příspěvky: 19635
Registrován: pát 27 říj, 2006 10:19
rok narození: 03 bře 1977
ID CNT statistics: 71
Bydliště: Újezd u Brna

Re: Ostatní diskuse k projektu Yoyo

#101 Příspěvek od forest »

Pokud jakýkolov projekt přestaneš úplně počítat, RAC se ponižuje skokově. Tuším je to na polovinu každý týden. Projekt nemá z čeho brát data o tvém aktuálním výkonu. Je to obdobné tomu, když nějaký projekt počítat začneš. Také po dvou dnech nemáš RAC odpovídající dennímu odváděnému výkonu. RAC je dlouhodobý ukazatel, který má své výhody, i nevýhody.

boceli
15.7894736842 %
15.7894736842 %
Příspěvky: 131
Registrován: čtv 16 úno, 2012 22:36
ID CNT statistics: 17333

Re: Ostatní diskuse k projektu Yoyo

#102 Příspěvek od boceli »

Nový subprojekt - Siever (nebo jsem si ho dříve nevšimnul?) + na naší stránce statistik se nepropisují aktuální medaile - pokud by na to mohl někdo zodpovědný mrknout, předem díky :)

Uživatelský avatar
Czech Human
52.6315789474 %
52.6315789474 %
Příspěvky: 1372
Registrován: sob 30 bře, 2013 14:16
rok narození: 0- 0-1981
ID CNT statistics: 19867
Bydliště: Praha

Re: Ostatní diskuse k projektu Yoyo

#103 Příspěvek od Czech Human »

Koukám dneska je VKliber uživatel dne na yoyo :smt038
Vzhůru pro body na linuxu :-).

Linuxová verze CNT 2018 balíčku: https://uloz.to/!yhQoPwu9UIel/cnt2018linux-7z
Linuxová verze PG CPU testu na GNF-21 https://uloz.to/!gXPiQ9BD2IF6/pgtest-tar-gz

Obrázek

nenym
78.9473684211 %
78.9473684211 %
Příspěvky: 7610
Registrován: úte 13 led, 2009 15:33
rok narození: 0- 0-1956
ID CNT statistics: 10124

Re: Ostatní diskuse k projektu Yoyo

#104 Příspěvek od nenym »

Czech Human píše: čtv 09 kvě, 2019 09:01Nevíte náhodou jak ecm donutit aby posílal jen ty obludně veliké uc (ale taky obludně rychle počítané když máte dost RAM) jednotky?....
Paměťově nenažrané obludy z postfixem _P2 byly separovány do samostatného podprojektu ECM P2 .
Blíží se konsolidační balíček pětikolky; šetřím trojbojem - piji staré víno, jím plesnivé sýry a jezdím v autě bez střechy.
UotD 767x Obrázek
1xObrázek 3xObrázek 9xObrázek 12xObrázek Obrázek
Obrázek

Uživatelský avatar
Czech Human
52.6315789474 %
52.6315789474 %
Příspěvky: 1372
Registrován: sob 30 bře, 2013 14:16
rok narození: 0- 0-1981
ID CNT statistics: 19867
Bydliště: Praha

Re: Ostatní diskuse k projektu Yoyo

#105 Příspěvek od Czech Human »

Konečně na to nejefektivnější řešení přišli :-). Díky za tip ;-).
Vzhůru pro body na linuxu :-).

Linuxová verze CNT 2018 balíčku: https://uloz.to/!yhQoPwu9UIel/cnt2018linux-7z
Linuxová verze PG CPU testu na GNF-21 https://uloz.to/!gXPiQ9BD2IF6/pgtest-tar-gz

Obrázek

v.svantner
42.1052631579 %
42.1052631579 %
Příspěvky: 697
Registrován: sob 11 pro, 2010 16:51

Re: Ostatní diskuse k projektu Yoyo

#106 Příspěvek od v.svantner »

Stačí 4 GB na vlákno?

Nebo je to lepší počítat bez HT?

Uživatelský avatar
Czech Human
52.6315789474 %
52.6315789474 %
Příspěvky: 1372
Registrován: sob 30 bře, 2013 14:16
rok narození: 0- 0-1981
ID CNT statistics: 19867
Bydliště: Praha

Re: Ostatní diskuse k projektu Yoyo

#107 Příspěvek od Czech Human »

8 GB+ na vlákno 33aaa Úlohy nejsou náročné jako třeba primegrid ale výpočetní algoritmus (s klesající efektivitou) urychluje stoupající objem paměti co má k dispozici. Rozdíl mezi 0,5 GB a 2 GB úlohami je výrazný, stejně tak mezi 2 a 8 GB. S velkým objemem RAM (256GB+) dosáhneš o mnoho větší výkon,i fousaté Opterony 6380 vybavené 256 GB RAM lehce překonaly každý běžným objmem RAM vybavený Threadripper 1950X (64 -128 GB) ačkoliv souhrnný matematický výkon mají cca poloviční. Pro plné využití 32 jader s HT potřebuješ alespoň 512 GB RAM :-). To jen tak pro zajímavost.
Vzhůru pro body na linuxu :-).

Linuxová verze CNT 2018 balíčku: https://uloz.to/!yhQoPwu9UIel/cnt2018linux-7z
Linuxová verze PG CPU testu na GNF-21 https://uloz.to/!gXPiQ9BD2IF6/pgtest-tar-gz

Obrázek

Dzordzik
57.8947368421 %
57.8947368421 %
Příspěvky: 2448
Registrován: ned 12 úno, 2017 00:26
rok narození: 18 zář 1980
ID CNT statistics: 503
Bydliště: Zdounky (u Kroměříže)
Kontaktovat uživatele:

Re: Ostatní diskuse k projektu Yoyo

#108 Příspěvek od Dzordzik »

Prostě jeden z dalších projektů exkrementální, zkráceně řečeno. Místo aby programátoři optimalizovali, tak to nechají tak, dyť oni to nefinancují ...
Albert: Dual Xeon E5-2696 V4, Supermicro X10DRG-Q, 64GB DDR4 ECC, 1x GTX 1070, Enermax Platimax 1700W

Uživatelský avatar
Czech Human
52.6315789474 %
52.6315789474 %
Příspěvky: 1372
Registrován: sob 30 bře, 2013 14:16
rok narození: 0- 0-1981
ID CNT statistics: 19867
Bydliště: Praha

Re: Ostatní diskuse k projektu Yoyo

#109 Příspěvek od Czech Human »

Já myslím že tam není kam optimalizovat, ten princip a algoritmus prostě funguje takhle. To bys musel vymyslet menší a přitom spolehlivý výpočet a udělat na něj algoritmus nový a to obvykle v takovéto matematice není zrovna sranda. A nikoho nenutí to počítat tak za mě je to v pořádku. Navíc se chytili za nos a ty obludy dali do samostatné kolonky což eliminuje to že ti uprostřed noci přeteče RAM protože projekt poslal moc velkých jednotek a počítač si je vesele spustil nebo že ztrácíš výkon protože máš stovky GB RAM ale chodí ti 50 MB jednotky...
Vzhůru pro body na linuxu :-).

Linuxová verze CNT 2018 balíčku: https://uloz.to/!yhQoPwu9UIel/cnt2018linux-7z
Linuxová verze PG CPU testu na GNF-21 https://uloz.to/!gXPiQ9BD2IF6/pgtest-tar-gz

Obrázek

Uživatelský avatar
® Plšák Ráďa ®
52.6315789474 %
52.6315789474 %
Příspěvky: 1306
Registrován: čtv 10 led, 2013 00:41
rok narození: 0- 7-1977
ID CNT statistics: 15767

Re: Ostatní diskuse k projektu Yoyo

#110 Příspěvek od ® Plšák Ráďa ® »

yoyo zase rozdává krásně vypašené jednotky ECM P2. Pro ty z vás co je neznají, jedna jednotka může zabírat až 8 GB paměti RAM, něco na způsob Amicable. Tak bacha na počet aktivních úloh, pro začátek radši omezit počítání přes App_config.xml a pak přidávat co vám RAM paměť dovolí 45cc
Motto: "Pokrok vědy nezastavíš, ale i ty ho můžeš urychlit." © 2014 Plšák Ráďa User of The Day
Obrázek

(Pozn. veškeré informace jsou z českých médií rozhlasových, televizních a nějaké fake news z internetu. Proto informační hodnota mého příspěvku je vždy nulová a radši to nečtěte. Televizní zprávy po 19 hodině sleduji minimálně a nehodlám se otečkovat vakcínou C19 verzí č.1 až 3, počkám si na revizi vakcíny splňující normy paní MUDr. S. Pekové, PhD..) 45cc

Uživatelský avatar
Šaman
5.26315789474 %
5.26315789474 %
Příspěvky: 27
Registrován: čtv 27 srp, 2020 17:17

Re: Ostatní diskuse k projektu Yoyo

#111 Příspěvek od Šaman »

Čest lidi, měl bych dotaz k Yoyo - u jiných projektů to nepozoruju. Možná o tom v téhle diskuzi píšete, jenže já sem new guy a uplně týhle řeči ještě nerozumim, takže za mě mou řečí:

- počítám yoyo a u jednoho pod projektu mi to dopočítalo do 71,429% a tam % zastavila, odčítaný čas se po odečtení 5 sec restartuje na původní hodnotu a takhle mi to tu visí celý den, možná déle. Co s tím? kde mám chybu? Probíráte tu spoustu věcí swap, přetečení atd. ale ja zatím nerozumět po vašem :smt100 Předem dík Šaman

nenym
78.9473684211 %
78.9473684211 %
Příspěvky: 7610
Registrován: úte 13 led, 2009 15:33
rok narození: 0- 0-1956
ID CNT statistics: 10124

Re: Ostatní diskuse k projektu Yoyo

#112 Příspěvek od nenym »

Odhaduji na kombinaci ecm P2 a nedostatek paměti. Pokud jsem se netrefil, specifikuj aplikaci, jsou veeelmi rozdílné.

Pro porozumění řeči zdejšího kmene musíš ovládat alespoň základní pojmy počítačové hantýrky a základní nástroj:
- RAM (instalovaná operační paměť),
- swap, též virtuální paměť - musí být statická, nejlépe 2x RAM,
- jádro, HT (virtuální) jádro,
- správce úloh jako základní nástroj pro sledování dějů ve stroji.
Dále musíš umět poznat, kolik RAM a swapu jednotlivá úloha zabírá. V BM to vidět není; já používám BoincTasks, lze to u většiny aplikací poznat ze správce úloh. Výjimkou je yoyo ecm (nikoli ecm P2), kde úloha yabírá naprostou většinu času pár mega, ale 5x behem výpočtu jde až do 2 GB skokově - systém s dynamickou tvorbou swapu nestačí reagovat.
Blíží se konsolidační balíček pětikolky; šetřím trojbojem - piji staré víno, jím plesnivé sýry a jezdím v autě bez střechy.
UotD 767x Obrázek
1xObrázek 3xObrázek 9xObrázek 12xObrázek Obrázek
Obrázek

Uživatelský avatar
Šaman
5.26315789474 %
5.26315789474 %
Příspěvky: 27
Registrován: čtv 27 srp, 2020 17:17

Re: Ostatní diskuse k projektu Yoyo

#113 Příspěvek od Šaman »

Oka takže:

yoyo jsem zkoušel na dvou strojích, na jednom se to seklo u aplikace Cruncher.org 519.01 a na druhém u: též Cruncher. org 519.01 a u ecm 705.02

- RAM - to je okej
- swap, též virtuální paměť - musí být statická, nejlépe 2x RAM - neznám pogooglim, tipuju, že její hodnota se dá někde nastavit
- jádro, HT (virtuální) jádro - myslíme v procesoru?
- správce úloh jako základní nástroj pro sledování dějů ve stroji - to znám, jen asi nevím co tam ve spojitosti s yoyo mám sledovat, ale počítám že čísla v záložce pamět a spojené s boinc

Jak to tak čtu tak yoyo je asi nejsložitější projekt na počítání, co se nastavení týče. Nejlepší rada bude ho nepočítat :D ale to ne. Je cesta jak rozpohybovat ty zamrzlé úkoly?

Dále musíš umět poznat, kolik RAM a swapu jednotlivá úloha zabírá. V BM to vidět není; já používám BoincTasks, lze to u většiny aplikací poznat ze správce úloh. Výjimkou je yoyo ecm (nikoli ecm P2), kde úloha yabírá naprostou většinu času pár mega, ale 5x behem výpočtu jde až do 2 GB skokově - systém s dynamickou tvorbou swapu nestačí reagovat. Jak toto ošetřit, aby mi k zamrzání nedocházelo? Nastavit virtuální paměť - statická 2x více než ram? nebude to mít pak vliv na ostatní provoz PC?

Předem dík za trpělivost a další kolo vysvětlování

Uživatelský avatar
forest
Admin webu a fóra CNT
Admin webu a fóra CNT
Příspěvky: 19635
Registrován: pát 27 říj, 2006 10:19
rok narození: 03 bře 1977
ID CNT statistics: 71
Bydliště: Újezd u Brna

Re: Ostatní diskuse k projektu Yoyo

#114 Příspěvek od forest »

Zkus v BM nastavit výpočty pouze na polovině CPU vláken, tedy počítání naráz pouze poloviny jednotek. Když to nepomůže, tak čtvrtiny.
Tím snadno odhalíš, zda je problém s nedostatkem RAM, nebo SWAP, nebo máme hledat problém jinde. Hlavně po přenastavení restartuj počítač, aby se RAM i virtuální paměť vyčistila.

SWAP, neboli velikost provozní virtuální paměti, je potřeba nastavit pevně na danou hodnotu. Yoyo má problém s variabilním nastavení. Ta potřeba na RAM i SWAP několikrát během výpočtu je opravdu skoková a několikanásobná, jak píše nenym.

nenym
78.9473684211 %
78.9473684211 %
Příspěvky: 7610
Registrován: úte 13 led, 2009 15:33
rok narození: 0- 0-1956
ID CNT statistics: 10124

Re: Ostatní diskuse k projektu Yoyo

#115 Příspěvek od nenym »

Jak nastavit virtuální paměť na W 10 je v příloze, já mám 64 GB RAM, takže swap mám na dvojnásobku.
Přílohy
Swap.PNG
Swap.PNG (150.14 KiB) Zobrazeno 5152 x
Blíží se konsolidační balíček pětikolky; šetřím trojbojem - piji staré víno, jím plesnivé sýry a jezdím v autě bez střechy.
UotD 767x Obrázek
1xObrázek 3xObrázek 9xObrázek 12xObrázek Obrázek
Obrázek

nenym
78.9473684211 %
78.9473684211 %
Příspěvky: 7610
Registrován: úte 13 led, 2009 15:33
rok narození: 0- 0-1956
ID CNT statistics: 10124

Re: Ostatní diskuse k projektu Yoyo

#116 Příspěvek od nenym »

Šaman píše: čtv 10 zář, 2020 06:56yoyo jsem zkoušel na dvou strojích, na jednom se to seklo u aplikace Cruncher.org 519.01 a na druhém u: též Cruncher. org 519.01 a u ecm 705.02
Cruncher: má 5 checkpointů, vzhledem k charakteru výpočtů se nedá dopředu odhadnout ani doba výpočtu, ani umístění chceckpointů. Klidně může být první checkpoint na 10 % výpočtu a druhý na 90 %, nebo též první na 80 %. Doporučení - nechat doběhnout výpočet až do konce, případně si hlídat polohu checkpointu ve vlastnostech úlohy. Nárok na paměť mizivý. V průběhu nepřerušovaného výpočtu progressbar opravdu může kolísat a vracet se zpět, po dosažení 100 % progressu tam může viset i několik desítek hodin a pořád počítat. No prostě aplikace výhradně pro stroje, počítající 24/7.

ecm (mimo P1 + P2): má 5 checkpointů rovnoměrně rozložených v intervalech 20 %. Nárok na paměť mizivá se skoky před chcekpointy až ke 2 GB na RAM i swap.
ecm P1 (úlohy chodí spolu se stadardními úlohami ecm): bez checkpointů, trvalý zábor RAM i swap do 2 GB.
ecm P2 (samostatný podprojekt): bez checkpointů, trvalý zábor RAM i swap až do 8 GB.
Blíží se konsolidační balíček pětikolky; šetřím trojbojem - piji staré víno, jím plesnivé sýry a jezdím v autě bez střechy.
UotD 767x Obrázek
1xObrázek 3xObrázek 9xObrázek 12xObrázek Obrázek
Obrázek

Uživatelský avatar
Šaman
5.26315789474 %
5.26315789474 %
Příspěvky: 27
Registrován: čtv 27 srp, 2020 17:17

Re: Ostatní diskuse k projektu Yoyo

#117 Příspěvek od Šaman »

Díky jdu se v tom pohrabat a dám vědět.

Ještě mám dotaz, když to poladim, rozběhnu ty zaseknuté projekty? Nebo už mám smůlu a zrušit?
Pak dotaz pro pochopení - projekty bez checkpoitů - co to pro mě jako uživatele, který nemá PC on 24/7, znamená? Kde v projektech zjistím, kolik a jaký checkpointy má danný projekt? Úplně ze začátku jsem se tu podivoval, že když vypnu PC, tak se mi napočítaný progress u některého projektu ztratí. Je to z důvodu chybějících checkpointů? a nebo zase úplně jiná záležitost? Já teda pak BOINC manager reinstaloval a pak už s tím problém nebyl, ale pravda ty úkoly s mizejícím progresem jsem mazal.

Uživatelský avatar
Šaman
5.26315789474 %
5.26315789474 %
Příspěvky: 27
Registrován: čtv 27 srp, 2020 17:17

Re: Ostatní diskuse k projektu Yoyo

#118 Příspěvek od Šaman »

Tak jo poladil jsem podle návodu, zaseklé projekty se nerozběhly, takže zrušeno. Vyrtuální paměť na pevno dvojnásobek ram a počítám Cruncher org 519.01. Tak uvidíme, sna to vyjde a mezi tím můžu jít ladit LHC, který taky nejede.

Uživatelský avatar
® Plšák Ráďa ®
52.6315789474 %
52.6315789474 %
Příspěvky: 1306
Registrován: čtv 10 led, 2013 00:41
rok narození: 0- 7-1977
ID CNT statistics: 15767

Re: Ostatní diskuse k projektu Yoyo

#119 Příspěvek od ® Plšák Ráďa ® »

Pokus se co nejdřív pochopit "šaman" editaci app_config.xlm. Jelikož taky počítám yoyo, ale cruncher jako jediný momentálně nepočítám. Tady máš něco na zkoumání moji tajnou šifru v app_config.xml, která mi vyhovuje pro moje účely, nejsou normované ani standardní. Spíš chaotické a šílené. 33aaa Pro tvé potřeby, budou hodnoty jistě jiné. Ještě dodám, pokud bys náhodou spustil při yoyo projekt Amicable Number, upřimnou soustrast tvému počítači 22rrr Na to, že v tom plaveš, sis vybral zajímavé projekty k tomu LHC, tam to taky poznáš jaký je to oříšek rozchodit např. podprojekt Atlas. V mém BOINCu to vypadá následovně Yoyo-Atlas-Amicable, viz. obrázek. 45bb

Má mystifikační šifra, kterou pochopí jen blázni co se radují z kreditů v BOINCu je následující:

<app_config>
<project_max_concurrent>10</project_max_concurrent>
<app>
<name>ecmP2</name>
<max_concurrent>2</max_concurrent>
</app>
<app>
<name>sieve</name>
<max_concurrent>6</max_concurrent>
</app>
<app>
<name>m-queens</name>
<max_concurrent>6</max_concurrent>
</app>
<name>crunch</name>
<max_concurrent>6</max_concurrent>
</app>
</app_config>

Tak bacha ať se z toho nezblázníš, v případě psychických problémů při luštění zde dávám ještě telefonní kontakt:
pro Moravský kraj - Brno .... 548 123 111
pro Český kraj - Praha ..... 284 016 111
Přílohy
yoyo-lhc-amicable.png
yoyo-lhc-amicable.png (414.43 KiB) Zobrazeno 5038 x
Motto: "Pokrok vědy nezastavíš, ale i ty ho můžeš urychlit." © 2014 Plšák Ráďa User of The Day
Obrázek

(Pozn. veškeré informace jsou z českých médií rozhlasových, televizních a nějaké fake news z internetu. Proto informační hodnota mého příspěvku je vždy nulová a radši to nečtěte. Televizní zprávy po 19 hodině sleduji minimálně a nehodlám se otečkovat vakcínou C19 verzí č.1 až 3, počkám si na revizi vakcíny splňující normy paní MUDr. S. Pekové, PhD..) 45cc

Uživatelský avatar
petnek
Moderátor
Moderátor
Příspěvky: 3669
Registrován: pon 28 led, 2008 12:44
rok narození: 16 kvě 1987
ID CNT statistics: 10883
Bydliště: Tábor
Kontaktovat uživatele:

Re: Ostatní diskuse k projektu Yoyo

#120 Příspěvek od petnek »

Pěkné 45bb 22rrr
Obrázek

Odpovědět

Zpět na „Yoyo@Home“