cpdn - aktuální stav - odpad

[Honza]

Jestli chytnes BBC2, tak jsi v pohode - viz dnesni program. Ale ja se/to nechytam...

[Honza]

Tak 1800 novych lidi behem prvnich 5 minut vysilani a asi 9000 behem vysilani poradu -> servery byly pretizene, protoze downloadovat desitky GB za hodinu je fakt hodne.

[JardaM]

Tak 1800 novych lidi behem prvnich 5 minut vysilani a asi 9000 behem vysilani poradu -> servery byly pretizene, protoze downloadovat desitky GB za hodinu je fakt hodne.

Jestli jim to zbuchne tak často jako se stávalo mnoha z nás, než jsme přišli na léčbu, tak v tom bude pěknej cirkus.

[Honza]

BBC konecne taky pusti chlup a ma dat CPDN £10K (nejakeho pul melounu) na poradny server a podobne.
Trickle databaze, ze ktere se delaji grafy a pocita kredit, ma miliony zaznamu a desitky GB, takze by se na to slusnejsi masina hodila.

btw, nejakych 170k host na BBC neni zrovna malo.
Kdyz zacinal klasik, do prvniho trickle se dostal cca 1 z 8 pocitacu. Pri spusteni BOINC pred 2 lety to byl 1 ze 4, na BBC i pres vselijake problemy to je kazda druha masina, takze to je rozhodne zlepseni.
Otazkou zustava, kolik masin dopocita model...

[JardaM]

Kdyz zacinal klasik, do prvniho trickle se dostal cca 1 z 8 pocitacu. Pri spusteni BOINC pred 2 lety to byl 1 ze 4, na BBC i pres vselijake problemy to je kazda druha masina, takze to je rozhodne zlepseni.
Otazkou zustava, kolik masin dopocita model...

A pak čím to je. Spolehlivostí mašin, blbovzdorností algoritmu? V každém případě úspěch.

[Honza]

A pak èím to je. Spolehlivostí mašin, blbovzdorností algoritmu? V každém pøípadì úspìch.

Dobra otazka a dalo by se o tom dlouho spekulovat.
urcite tam hraje roli zkusenost - proste pri prvnim public launch jsme moc nevedeli, jak na to. Pro lidi z teamu to bylo novum (akademici o takovych vecech moc nevi) a mezi betatestery taky moc lidi nebylo, kteri by mely zkusenost s rozjizdenim velkeho projektu (ja mel zkusenosti s rozjizdenim ruznych mensich DC).
Classic byl na svou dobu dost narocnou aplikaci - hodne masin nevyhovovalo.
Brzy se prislo na to, ze hodne lidi ma nestabilni masiny - necitelny OC, spatne chlazeni...precijen to zacinalo pred letem
Taky dost lidi jeste jelo na Win 9x, ktere si sami rikaji o pruser

V dnesni dobe jsou problemem antiviry - hlavne Norton a nektere dalsi to evidentne serou. Resenim je proste BOINC folder vyloucit ze shieldu.
Dalsim dnesnim problemem jsou padoxne provideri - lidi co maj napriklad AOL maji evidentne problemy s rozjetim kvuli providerovi. Nezkuseny user a vychcany provider je fakt blba kombinace
A pak brajgl delaji defragmentace - kdyz si nekdo pusti defragmentaci a pritom mu stale jede model, ktery neustale zapisuje, tak kazdy pocitacove pologramotny vi, ze si to koleduje vo pruser. A kdyz je navic zdrojak ve fortranu, kde se na Crayich a podobnych masinach pred 15 lety s nejakou radobydefragmentaci v podani M$ nepocitalo, tak je to taky problem.

Pokud je masina stabilni a model presto padne, tak model nejcasteji z vyse uvedenych duvodu: antivir, degraf...a nebo hardcore hraci, kde gamesa, memory usage, DirectX a podobne vyhubi vsechno mozne v pozadi - vcetne citlivejsiho modelu.

Jinak jim poradny server preju - jako kazdemu projektu. Kdyz z jedne strany tlaci lidi z vedeckeho tymu, na druhe strane nejaky chytraci z telky a do toho remcaji useri, tak chudak programator, co ma jeste ne zrovna dobry HW a je limitovan i rozpocten na kompilatory a podobne...

[Honza]

Vcera jsem dostal z UK klasickou postou v obalce DVDcko zminovaneho poradu BBC4.
Zavzpominal jsem, jak jsem pred lety predavel DVD do XVid nebo neceho podobneho, a opet se podarilo.

Dnes to ze skoly uploadnu na nejaky server - je toho cca 5x90MB - a dam odkaz pres PM tem, kteri se jiz na porad ptali a projevili zajem. Jestli chce jeste nekdo dalsi, tak piste SZ/PM. Sam jsem to ale jeste nevidel...

[Honza]

Konecne jsem se dostal ke shlednuti BBC poradu. Myslim, ze to je velmi dobry uvod i pro laiky o co vlastne ve studiu zmen klimatu jde, jake zdroje dat historickych a kulturnich dat se cerpaji, podle ceho se usuzuje na soucasny a budouci vyvoj.

Carl opet zapnul moznosti koukani na graf u Coupled modelu (jak na BBC site, tak na klasickem CPDN)...jeste neni nova a optimalizovana db nakrmena, takze to vykazuje 'mezery' v grafech.

[Honza]

V Oxfordu pri rekonstrukci jednoho modelu, ktery spadnul v roce 2013, prisli na duvod.
Zkracene u modelu, ktere maji parametr entrainment coefficient s hodnotou 0.6 (zpusobe vyssi citlivost modelu....kterou lze odpozorovat napriklad rychlejsim vzestpem teploty z pocatecnich letech/dekadach modelu), jsou nachylne k padani. Krome zminovaneho modelu kolegy padnul i muj model v roce 1989 (stejny parametr) a model dalsiho cloveka (stejny parametr, opet rok 2013).

Nejspis bude pouzit tzv. "trickle down", tedy prikaz ze serveru, ktery model ukonci. O teto fuknci se mluvilo jiz davno a je zabudovana prave k tomu, aby slo nektere modely (napriklad selektivne podle parametru) ukoncit, jestlize se na zaklade nejakeho zkoumani zjisti, ze je jiz neni treba dale pocitat.
Nastesti pravidelne rocni trickles a uploady po dekadach davaji dost informaci, ktere jsou i tak velmi uzitecne.

Pro ucely analyzi jsou velmi cenne modely alespon do roku 1990 , od ktereho zacina vlastni predpoved modelu (neni od roku 2000 nebo 2005, jak by se treba mohlo zdat). Mozna je tam zamerne nejaky prekryv, aby predpoved sla dale porovnavat s pozorovanymi daty.

Snazil jsem se podivat, jestli nejaci lide z CNT maji taky takove modely. Nejprve mi dlouho trvalo, nez jsem neco jako CNT nasel...ale na konci prvni padesatky se neco takoveho zjevilo.
Napriklad model usera Zazie stejny parametr - http://bbc.cpdn.org/graph.php?resultid=40888

Libore, aj tvuj model tam je
btw, exit code -1 je asi zpusobem nedostatkem video RAM - typicky u integrovanych GPU s 8MB - coz treba pro kancelarsky desktop staci, ale na 3D OpenGL je to malo. Resenim je zvysit video RAM nastavenim BIOSu.

Vse co pisi vyse se tyka i hlavniho CPDN, ktery jiz take posila [pouze] Coupled Modely.

No, snad to jeste nekoho zajima...uvidime z reakci.

[dejvidek]

No alespoň že i nedokončený model je k nečemu a nejedná se pak o ztracený čas.
dejv

[LiborA]

Libore, aj tvuj model tam je
btw, exit code -1 je asi zpusobem nedostatkem video RAM - typicky u integrovanych GPU s 8MB - coz treba pro kancelarsky desktop staci, ale na 3D OpenGL je to malo. Resenim je zvysit video RAM nastavenim BIOSu.

Jo ten model spadnul někdy před měsícem když jsem si hrál s OC. Nechal jsem to zatím u ledu, že to obnovím až po dopočítání klasického CPDN. Vidím, že už to ani obnovovat nemusím. Jinak grafika má 128 MB (Radeon 9200), takže ten pád byl asi opravdu způsoben OC - nebo mi také možná děvčátka šikovně sáhla na reset

[Honza]

Zatim neoficialni informace...
problem modelu padajicich v roce 2013, ktere maji zaroven parametr entrainment coefficient s hodnotou 0.6, muze souviset i s problemem souboru (a ze jich v CPDN modelech neni malo). Nick F. k tomu dela nejakou analyzu (ten co delal analyzu THC experimentu, pokud si jej dobre pamatuji).

Spekulace...
Mozna to dopadne tak, ze se vygeneruji nove WUs, ktere budou zacinat v roce 2000 a pojedou pouze 80 let do roku 2080.
Z hlediska usera to neni problem - restart dumps se delaji kazdy rok modelu, takze lze teoreticky model napojit ve kteremkoli roce. Akorat se trochu potrati ta vazba, jak se cely model vyviji.
Z hlediska projektu uz je to slozitejsi, protoze je potreba je zase korektne spojit, vyvstava problem ze cast modelu bezi na jedne masine/platforme a druha cast jinde atp
No treba za odmenu dostatnou ti, co se dostali do roku 2013, svuj model opraveny

[Honza]

Uz se vi, cim je zpusobene padani modelu v rijnu roku 2013. Vtipky mluvi o konci Mayskeho kalendara, ale problem se jidne...souvisi to se souborym formatem, ve kterem je ukryte datum a podobne.
Objevil se jeste dalsi problem, o kterem zatim nemohu referovat...jedna se zatim o interni informaci. Pravdepodobne Nick (jako novy project manager) nebo treba Myles budou ucastniky projektu informovat.

K aktualnimu stavu je mozne rici, ze nejsou k dispozici zadne jednotky. Kdo umi cist mezi radky, spravne usuzuje, ze to ma souvislost.
Komu by vyschla prace na masine a ma prebytecnych 450MB RAM, muze si cucnout Seasonal model a schroupnout za dva tydny (na obyc Pentiu D) jeden atmosfericky high-res

[Bubak]

450MB RAM nemam zbytecnych na zadne masine. Nemohl bys aspon ramcove napsat jak dlouho nebude zadna prace? Mohl bych se aspon rozhodnout na kolika masinach nahodim zalozni projekt.

[LiborA]

Docela by mne zajímalo, jestli teda nemá smysl CPDN na nějakou chvíli pozastavit (myslím na svých kompech - ne projekt), počkat na vyřešení situace a zatím vrhnout kapacitu jinam. Byla by škoda výpočetního času, pokud by se měli spočítané výsledky potom vyhodit.