F@H Team "hardware.no" (lagnr: 37651)

[oyoygard]

Takk for det, AnaXyd. Det kabinettet er en drøm å jobbe med, nesten så jeg kan sitte oppi der å skru..

 

OK, nå trenger jeg visst litt hjelp her. Har nå kjørt en stund med "client-type=bigadv", og de to siste WU er lastet ned med "bigbeta". Jeg får bare 6098 og 6099. (siste 17 er det) PPD ligger ganske stabilt i underkant av 90 000. Burde jeg ikke få noen av de "gode" WU også?

[ei57]

Du har mer enn 16 kjerner og har satt client-type=bigbeta, det skal være det som trenges for å få ned de store WU'ene. Regner med at du har byttet ut advanced med bigbeta, dersom begge ligger inne, kan det være forklaring på at du fortsatt får vanlig smp.

[AnaXyd]

Er det ikke litt teit at man må være såppass "dreven" innen F@H klienten for å faktisk få de poengene man fortjener? Burde ikke v7 klienten "skjønne" at det er bigadv osv?

 

Har nå bestilt alt utenom CPU fra CDON.no, de hadde alt på lager og til en billigst pris. Må si de har mye rart nå, og bedre priser enn konkurrentene! Får håpe alt går i orden da, og at jeg ikke blir lurt eller noe. Da kommer vel utstyret til uka, så det blir spennende.

[-alias-]

Da gratulerer vi oss selv med å ha rundet 2.000.000.000 poeng.

 

Og hadde jeg ikke akkurat mistet 2 x 8102 så tror jeg vi jammen ville klart ny månedsrekord også. Den forrige er på 103,312,442 og vi passerer snart 101.000.

 

Fikk meldingen på 2 forskjellige maskiner i samme time, henholdsvis [07:13:57] - Server reports problem with unit. og [07:44:52] - Server reports problem with unit. 820K poeng down the drain!

 

Maskinene har forskjellige units, men får ned samme unit som serveren rapporterte feil med. Jeg har vært bortreist og oppdaget det akkurat. Loggen viser ingen problemer med noen av WUene. Mulig jeg må spørre på forumet om hva som skjer siden jeg tviler på at feilen ligger hos meg. Ut fra loggen leverte begge feilfrie 8102 forrut for dette.

 

Har nå bestilt alt utenom CPU fra CDON.no, de hadde alt på lager og til en billigst pris. Må si de har mye rart nå, og bedre priser enn konkurrentene! Får håpe alt går i orden da, og at jeg ikke blir lurt eller noe. Da kommer vel utstyret til uka, så det blir spennende.

 

Ikke noe tull med CDON, de er helt trygge å handles hos.

 

Edit: Sjekket alle loggene og jeg mistet faktisk også 2 stk. 8101, så alt i alt, ca. 1500p til folding Hell!

Endret 30. september 2012 av -alias-

[ei57]

Følgende skrevet av Kasson idag:

Yes--I see something weird going on. Nothing has changed with the work server, but I think some of the people at Stanford may have changed the assignment server without telling me. I'm investigating.

 

http://foldingforum.org/viewtopic.php?f=18&t=22566

 

CDON har jeg bare positive erfaringer med. De er også billigst på frakt, men det er litt rotete å finne frem på sidene deres. Kan være lurt å navigere seg frem vha. prisjakt.no.

[-alias-]

Ja, så det der. Mistet akkurat poengene for en 8101 på SR-2en også, så samlet nå snakker vi over 1700p i tap siste 12 - 14 timer. Håper de får fixet det snart så vi slipper dette lengre.

 

Men Xeon MP riggen leverte ok for litt siden, før SR-2en så jeg skjønner ikke mye av dette.

 

Edit: Leser på forumet at det henger sammen med når ting ble lastet ned. Tydeligvis har det vært feil på WUene og er ikke direkte relatert til Work server ved upload.

Endret 30. september 2012 av -alias-

[knopflerbruce]

Min skyld at det ikke er månedsrekord. Har bare EN maskin oppe siden jeg måtte ta ned de 3 dedikerte for å rigge opp vannkjølinga til 2P-kortet som slokna. Dog har jeg omsider fått nok penger til å kjøpe et 4P, så setter det i bestilling i morra

[-alias-]

Tror vi heller skylder på Stanford som så ofte før, så setter vi en skikkelig rekord nå i oktober. Det ser ut til at styret er over for denne gang siden jeg fikk levert to WUer på normal måte i natt.

Endret 1. oktober 2012 av -alias-

[OEH]

Hei,

 

Finnes det en side hvor man kan sjekke hvor mye PPD man regne med å få med forskjellige hardware?

Har en gammel C2D 2,4GHZ og ett Nvidia 8800GTS som jeg lurer på om kan gi meg noe ekstra.

[-alias-]

For GPU: http://foldingforum.org/viewtopic.php?f=38&t=22281

 

og CPU: https://docs.google.com/spreadsheet/ccc?key=0Aspl6-RkaxtFdHdTdUdmUjhWalpXWVZ2S2xvejBDcHc#gid=0

[OEH]

For GPU: http://foldingforum....hp?f=38&t=22281

 

og CPU: https://docs.google....xvejBDcHc#gid=0

 

Takk for lenkene -alias-, fra hva jeg kan se så kan jeg regne med ca. 1,5-2k ppd for cpu og 4,8-6,5k ppd for GPU.

Begynner å bli litt kjølig ute så greit å fyre opp maskinen som står som HTPC på soverommet og varme opp litt.

[oyoygard]

Trasig med så mye poeng tapt, -alias-!

Men det er ihvertfall gode nyheter herfra i dag. Leste meg opp på parametre til v7-klienten i går, og prøvde å sette "max-packet-size=big" (default er "normal"). "client-type=bigadv". Jeg dro da ned en 6901 som ga 125000 poeng på ca 18 timer. Nå står den å tygger på en 8102, som nå "guestimerer" ca 300000 PPD. Akkurat det tror jeg ikke før jeg får se det, for den forrige (6901) varierte mellom 120 og 220 000 PPD og endte altså på ca 165000.

 

Bra framgang, uannsett!

"max-packet-size=big" er lurt..

 

EDIT: Nå forandre "guestimaten" her seg til 167000 PPD. Hvis den oppfører seg som den forrige WUn, så så den ut til å variere mellom ett høyt, og ett lavt estimat, og fasiten endte et sted midt mellom.

Endret 1. oktober 2012 av oyoygard

[-alias-]

Ja hvis du bruker maskinen til andre ting mens du folder så vil credit forandre seg raskt ned i verdi.

 

Tapet mitt i poeng er marginalt i den store sammenhengen, men ergelig for statistikken siden den faller fort, men er desto treger å få til å gå opp igjen.

Endret 1. oktober 2012 av -alias-

[AnaXyd]

Da har jeg likesågodt måkt opp en arbeidslogg for serveren jeg har i bestilling. Følte det var så lenge siden jeg har laget en arbeidslogg på noe, så det var deilig å lage en igjen, etter mange år siden sist! Ta gjerne en titt innom og kommenter på den folkens, den er jo laget for å folde så er jo relevant her inne.

 

https://www.diskusjon.no/index.php?showtopic=1462332

 

CDON har ikke fått sendt varene enda, men håper de får sving i salaten snart og får pushet ut delene. Ebay selgeren har allerede sendt CPUene, så det går vel ganske så fort, eller hva -alias-? Kjøpte fra dinsdale.

 

Ser jo veldig bra ut med 165k PPD da oyoygard! Da gleder jeg meg selv til å få noe lignende! Bruker du windows eller linux? Jeg tenkte å kjøre opp en Windows 2008 Server installasjon i bunn som OS, og kjøre en virtuell optimalisert linux som skal folde. Det var ihvertfall slik jeg fikk best PPD på den serveren jeg har idag.

[Snytefant]

Har lagt til workloggen som favoritt nå!

Digger gjennomførte worklogger, så satser på at du lager det!

 

Drømmer om en god 2/4p-rigg jeg og, men det blir ikke før man er ferdig med studiene og ut i en fast jobb med en (forhåpentligvis) stødig økonomi

[oyoygard]

Nice blogg, AnaXyd!!!

 

-alias-: maskinen kjører kun folding for tiden. Nyinstallert og ganske skrapa OS (Debian/Linux) også (siden jeg byttet systemdisk i slamme slengen) Mener jeg har sett flere (inkl. deg?) har nevnt at TPF varierer ganske mye, og v7-klienten justerer estimated PPD fortløpende etter dette.

 

Håper jeg skal klare ganske mye mer enn 165k PPD på 8102, ettersom estimatene nå varierer mellom 170 og 300k.

 

Håper du tar deg tid til en runde med memtest86+ når du får bygget maskinen, AnaXyd. Jeg har en ekkel følelse av jeg ikke får full båndbredde mot minne her. Mener Memtest86+ rapporterte ca 8GB/s, noe som er skuffende med 4 minnekanaler (pr. CPU!) når jeg fikk 10-15GB/s (avhengig av frekvens på minnet) med 3 kanaler på i7-920. `hdparm -tT /dev/sda` (en-eller-annen disk) rapporterer ca 7000MB/s mot minne ("cached reads") Mulig maskinen min ikke skjønner den skal gå mot lokalt minne for hver CPU og dermed drar ned snittet? Skjønner det er vanskelig å svare når jeg ikke vet hva jeg skal spørre om, men er det noen som kan kommentere på dette?

 

En ting til: Jeg har ikke testet effekten av dette, men jeg har slått på "Try to lock cores to a specific CPU. Also known as CPU affinity locking" i v7-klienten. Minner ikke det om det et av de verktøyene dere brukte med v6-klienten? Var det Kraken, tro?

 

Snyltefant: Jeg tror ikke det er noe som heter "stødig økonomi".. Jo mer penger du får, jo dyrere ting får du lyst på! En kamerat av meg sa alltid: "Penger har vi nok av, det er verre med mat og klær.." Alt handler om å prioritere - kjør på med folderigg!

Endret 1. oktober 2012 av oyoygard

[ei57]

For Ubuntu (Debian), så bør BFS installeres på alle Intel-maskiner. Det hindrer at en eller flere kjerner etter en tid idler.

 

På maskiner med mer enn en cpu, bør en i tillegg ha Kraken. Guide til BFS og Kraken for Ubuntu 10.10 i link under:

 

http://hardforum.com...d.php?t=1601608

 

Edit: Affinity var noe som ble brukt for å låse cpu-bruk ved gpu-folding til en kjerne og la de andre være forbeholdt smp. Det har ingen positiv effekt for bigadv.

Endret 1. oktober 2012 av ei57

[AnaXyd]

Har lagt til workloggen som favoritt nå!

Digger gjennomførte worklogger, så satser på at du lager det!

 

Drømmer om en god 2/4p-rigg jeg og, men det blir ikke før man er ferdig med studiene og ut i en fast jobb med en (forhåpentligvis) stødig økonomi

Takk for det! Jeg skal prøve så godt jeg kan, blir spennende når jeg mottar delene forhåpentligvis denne uken!

 

Nice blogg, AnaXyd!!!

 

Håper jeg skal klare ganske mye mer enn 165k PPD på 8102, ettersom estimatene nå varierer mellom 170 og 300k.

 

Håper du tar deg tid til en runde med memtest86+ når du får bygget maskinen, AnaXyd. Jeg har en ekkel følelse av jeg ikke får full båndbredde mot minne her. Mener Memtest86+ rapporterte ca 8GB/s, noe som er skuffende med 4 minnekanaler (pr. CPU!) når jeg fikk 10-15GB/s (avhengig av frekvens på minnet) med 3 kanaler på i7-920. `hdparm -tT /dev/sda` (en-eller-annen disk) rapporterer ca 7000MB/s mot minne ("cached reads") Mulig maskinen min ikke skjønner den skal gå mot lokalt minne for hver CPU og dermed drar ned snittet? Skjønner det er vanskelig å svare når jeg ikke vet hva jeg skal spørre om, men er det noen som kan kommentere på dette?

 

En ting til: Jeg har ikke testet effekten av dette, men jeg har slått på "Try to lock cores to a specific CPU. Also known as CPU affinity locking" i v7-klienten. Minner ikke det om det et av de verktøyene dere brukte med v6-klienten? Var det Kraken, tro?

 

Takk for det! Jeg kan kjøre noen runder med memtest vet du, men hva er det jeg skal forvente i båndbredde? Jeg har egentlig ikke et kvekk av peiling på minnebåndbredde, det har jeg ikke drevet med før. Åssen minne har du på Xeon hovedkortet?

[oyoygard]

Takk for innspill, *ei57*, jeg setter pris på det, men..

(hehe, var ikke det en bra innledning... )

 

Leste litt fort om BFS her. Det jeg fant i farten refererte til 2.6-kjerner, og jeg kjører 3.2.something.. Har vel skjedd en del med scheduleren i Linux-kjernen på det siste? `top` viser også at FahCore bruker 319X% CPU, som for en 32-trådet maskin burde være greit. Tanken min med affinity var å hindre at en tråd "hopper" til en ny CPU mens data ligger i cache på den gamle. Aner ikke om den teorien holder vann, men har uannsett lyst til å la det kjøre som det er noen døgn, så jeg får se hva jeg får nå (hver WU tar jo nesten et døgn, ihvertfall med 8102 slik det ser ut nå)

 

Jeg trodde Kraken også var for å sette affinity, mulig jeg har bommet her.

 

AnaXyd: Mener jeg så i reklamen for Xeon på 2011 at *teoretisk* båndbredde mot minne var ... 52GB/s? Laangt unna de 8 jeg ser, ihvertfall! Jeg har 8x4GB-moduler som skal klare 2133MHz. Det var ikke veldig stabilt hos meg. Hovedkortet med "auto" setter dem til 1333MHz, jeg kjører dem på 1600 nå.

Ser ut som du har spec`et opp maskinen med en minnemodul pr. CPU. FLOTT! -da får vi se om det har noen betydning i praksis!

 

Edit: ei57, du bør lese kommentaren min litt utfra at "det er kjedelig å diskutere, hvis alle er enig..." Jeg setter veldig pris på innspill, men har lyst til å teste mine egne ideer først!

Hvilken kjerne og klient kjører dere?

Endret 1. oktober 2012 av oyoygard

[ei57]

Jeg har foldet med Ubuntu fra 8.04 til 11.10 og har sett problem med scheduleren på alle versjoner mellom 10.04 og 11.10. Det kan gå knirkefritt i uker eller mer, men jeg har måttet legge inn BFS på et eller annet tidspunkt. Om det er løst på nyere versjoner av kjernen vet jeg ikke. Dersom tpf øker og du ser at cpu-bruken har falt, så er BFS sannsynligvis løsningen.

 

Når det gjelder affinity, så betyr core i uttrykket "try to lock cores to a specific cpu", fahcore_xx. For bigadv er det fahcore_a3. En kjerne var og er sikkert fremdeles nok til å mate flere Nvidia gpu'er, og siden de benytter en annen fahcore, så gir det mening. Da unngår en at de(n) hopper tilfeldig rundt, noe som kan forstyrre smp/bigadv relativt mye.

 

Kraken har jeg aldri hatt behov for, men Alias og War bør kunne si noe om den.