Čo na 8+ diskov?

[molnart]

Zatial ta turbova zostava mi dava najvacsi zmysel, ale este by som hodil do plena myslienku bazarovej ryzen 3600 a za usetrene peniaze kupit ECC RAM

[mp3turbo]

dik.

Je to celkovo o nejakych 29,- ci 35,- drahsie nez AMD ale zase je o chlp vykonnejsie (nepotrebne, nepojdes na 100.00% 24x7x365), neuvidis ziadny rozdiel ale je to proste Intel. Ano, chcem bez hanby nahlas povedat ze FreeBSD nikdy nebolo programovane na AMD platforme od gruntu. Ano viem ze na AMD funguje a ze tisice ludi bezia TrueNAS na AMDckach, nemam voci AMD platforme ziadne zimomriavky (stara ma notebook amd, mlady ma desktop amd, iba ja bezim na inteloch).

ECC : vsetci nad ECC rejvujú ale ja mam taky dojem ze 99.99999999999373267% zemegule fičí na desktopoch bez ECC a este sa z toho nikto nepos...
kladal od strachu a este sa moc vela dat neposkodilo kvoli kozmickemu ziareniu a podobnym veciam.

Ano ECC argument uznavam, ano servery a datacentra ma zivia cely zivot, uplne uplne cely ale nesiel by som po nich za kazdu cenu. Rozhodne nie na procesoroch tejto triedy ktore NIKTO NIKDY PRIMARNE NEDESIGNOVAL S ECC, NIKTO NIKDY NEOTESTOVAL A NIKTO NIKDY NESUPPORTOVAL V PRODUKCNOM PROSTREDI. Nieco ine je Xeon ktory ma ECC uz 30 rokov furt a ina cesta nikdy nebola, nieco totalne ine je obstarozna desktopova haraburda AMD s ktorou nemas najmensie tusenie kto co vyvadzal pocas zivota (kukni si ake prispevky tu pise JuroS, 1.6V do procesora kde 1.4V je alarm a podobne), pohadzoval po supliku aby poriadne oskrabal kontaktne plôšky, narovnaval skrivene piny a taketo silne kajnšmetke.

Ked mozem vyjadrit svoj nazor (nazor cloveka co cely zivot robi s ECC) : rozhodne mi pride lepsi napad fičať non-ECC ako na bazarovom procesore.

[molnart]

Nj, som zabudol ze tie ryzeny maju piny a asi nizsiu zivotnost. Pri tom ecc, je rozdiel ze komp ti bezi 8 hodin denne a potom restartnes alebo mas uptimy 250+ dni na serveri, kde tie chyby sa mozu nahromadit

[mp3turbo]

nemyslim si ze sa nahromadi - nema sa co. Bud to proste vie definovat nulu alebo jednicku. Milion dni za sebou. Kumulativnu funkciu nepozorujem

Uplne bezne bezim desiatky dni svoje NASká a podobne bezne PC katastroficky šlendriánsky poskladane dohromady, single memory modul namiesto páru, zakladny stavebny material je lepiaca paska, na zaloznej bedni Adaptec v pci slote bez upevnenia lebo mam specificku chassis takze proste len tak volne plantá v tom slote... nic, ziadne errory na rar suboroch. Nikdy.

[molnart]

nemam za tym nejake vedecke argumenty, ale predstavujem si to tak, ako ked pustaas memtest. kolko ho doma pustame? hodinu? den max? nevyhodil by chybu kebyze bez tyzden a viacej? ja ked som teraz presuval disky z microservera a vypinal ho mal tusim uptime okolo 280 dni a len teoretizujem ze pomylena jednotka a nula kazdych 10 dni moze sposobit nejaky kaskadovy efekt
(k tomu uptime: na starom Linksys routri v este byte som mal cez 1000 dni, a to bola mydlova krabicka za 70 eur flashnuty tomatom. strasne frustrujuce ze pri tych uptimoch len zavistlivo citas changelogy novych buildov, chodis na github kazdy den hladajuc pozerajuc nove commity a vies ze nemozes updatovat lebo prides o uptime).

[mp3turbo]

>> nemam za tym nejake vedecke argumenty, ale predstavujem si to tak, ako ked pustaas memtest. kolko ho doma pustame? hodinu? den max?
>> nevyhodil by chybu kebyze bez tyzden a viacej?

nevyhodi, nema dovod. Raz som sa v datacentre zabudol, mali sme problematicky blade (bl460c gen8) co padal, HCI Memtest som na nom mal pusteny asi tri mesiace. Viem ze je to server, viem ze sa pytas na volaco ine. Pokial je bezna domaca platforma stabilna, nema dovod nerozlisit 0 od 1 ani po desat tisic dnoch uptime. Furt su to rovnake operacie dokolecka dokola, vsetko ostatne su nase psychologicke obavy co keby nahodou.

Ked mas 2, 3 alebo 8 rocny server v datacentre, nemas strach ze by nahodou nevedel rozlisit nulu a jednicku ? Ze by ECC muselo viac "zasahovat" ?


Som zvedavy s cim dojde Zoom lebo on dokaze prekvapit volajako mimo rytmus

[Marto]

ECC : vsetci nad ECC rejvujú ale ja mam taky dojem ze 99.99999999999373267% zemegule fičí na desktopoch bez ECC a este sa z toho nikto nepos...
kladal od strachu a este sa moc vela dat neposkodilo kvoli kozmickemu ziareniu a podobnym veciam.

Ano ECC argument uznavam, ano servery a datacentra ma zivia cely zivot, uplne uplne cely ale nesiel by som po nich za kazdu cenu. Rozhodne nie na procesoroch tejto triedy ktore NIKTO NIKDY PRIMARNE NEDESIGNOVAL S ECC, NIKTO NIKDY NEOTESTOVAL A NIKTO NIKDY NESUPPORTOVAL V PRODUKCNOM PROSTREDI. Nieco ine je Xeon ktory ma ECC uz 30 rokov...

Ehm what? To, že 99,9...% desktopov ide bez ECC ešte predsa neznamená, že sú nepotrebné. V serveroch v produkcii ísť bez nich vážne len keď sa venuješ nejakým blbostiam a poskytujú sa len základné služby, kde je nejaká chyba v podobe prehodenej 0 a 1 akceptovateľná ak v nich máš štandardnú RAMku a ideš veľmi silno po cene... Mne rozdiel v cene nestojí za to, že mi bude server pri výpočtoch alebo práci hádzať blbiny a nebudem o tom ani vedieť a potľapkáme sa po ramene, že je všetko OK, lebo pri štandardnej pamäti si to nevšimneš. Maximálne budeš rozmýšľať prečo sa server sem tam sekol, zreštartoval, padla aplikácia atď. Server s ECC aj informuje, koľko bitov opravil, keď chybu zistí. Ak si to ešte nezažil a používaš ECC, tak máš šťastie alebo to neloguješ. Polemík a príkladov, prečo ECC áno je na nete dosť.

V rámci bazárovej kúpy je rozdiel v cene tiež smiešny a už je to len na Tebe.

BTW AMD s Ryzenmi ECC nejako nepropagoval a ani nepopieral, pri Pro to myslím aj oficiálne podporuje. A Intel mal ECC aj v i3 . i5 a i7 ho kvôli WS Xeonom vzal, nepredávali by sa, len tam i3 trebalo párovať s čipovými súpravami, ktoré ECC podporovali myslím.

[mp3turbo]

>> V serveroch v produkcii ísť bez nich vážne len keď sa venuješ nejakým blbostiam a poskytujú sa len základné služby,

ziadny realny server nevie chodit bez ECC. Dekady.




>> Server s ECC aj informuje, koľko bitov opravil, keď chybu zistí.

mozem sa opytat, kolko bitov dokaze zistit a kolko dokaze opravit ? My v tomto trosku tápame so Zoomom aj s Molnym, sme taki začiatočníci.

[zoom]

Tu som, konstantne vybavujem 8 veci naraz a stale si neviem uplne usporiadat zivot. Takze tak utrzkovito:

• Terajsi filé server jednoducho nejde rozbehat. Monitor zobudi zo stand-by, ale obraz je len cierny a rozlisenie hlasi 1024x768. Po studiu dosky som si vsimol nafuknuty kondik pri RAM slotoch, tak to ani nejdem dalej ozivovat a novy HW je uz asi ze potrebny.

• Pamate kupim hocijake, co budu skladom - lacne a sympaticke. Neviazem sa na rychlost, aj tak pojdu na 2666 kvoli stabilite a 1.2V. G.Skill mam rad, ale Mushkin tiez, takze kludne tie Essentials mozem zobrat.

• Ten 12400F CPU by som nebral, lebo chcem integrovanu grafiku. 12400 uz stoji nad 180€ a to mozem rovno tu z bazaru na fore zobrat 12600K za 180 a som zase niekde inde. Ale nechcem tolko davat za CPU. Ak by som chcel novy Intel 12th Gen 6-jadro, tak s doskou sme na >320€ oproti ~220 u AMD. A usetrit stovku a mat o 2 jadra naviac, aj ked jemne menej vykonne... to je asi dobry deal.

• Samozrejme, ze hned po odoslani postu som zacal este vymyslat mimo rytmus. Mal som vybraty tuto AM4 Ryzen alebo LGA1700 Intel a napadlo mi, ze mozno by som chcel ECC, pre dobry pocit, avsak:
- Ryzen a ECC: Dosky maju niektore ECC pamate supported, ale len ako "tolerujem to a nabootujem". Samotna korekcia chyb je asi nefunkcna. Chce to Ryzen Pro a ten je velmi tazko k dostaniu. Nema vyznam ho lovit niekde po eBayoch.
- Intel a ECC: Toto je jedine Xeon. V rozpocte su priblizne LGA3647, cize cca od 2016. Tam je ale maly narast single-thread vykonu oproti terajsej zostave a nezachrani to ani 20 jadier v CPU. Chapem, ze datacenter servery to vyuziju, ale moj domaci bude asi viac profitovat z modernejsej architektury a menej jadier.
Vysledok je, ze kaslem na ECC a radsej naschedulujem castejsi scrubbing dat na ZFS (tj. overenie integrity vsetkych suborov).

Takze som tam, kde som bol, ale uz viem, ze nechcem Xeon ani Ryzen Pro. Musim sa uz len presvedcit, ze idem minut tie peniaze a vezmem asi to AMD. Ak by sa ale objavil dobry deal na 6-core Alder Lake, tak pojdem do toho. Asi nic lepsie/ine uz nevymyslim.

[mp3turbo]

jaaaaaaj nezderivoval som ze treba iGPU (myslel som ze to bude headless, na instalaciu sa pouzije cokolvek a potom sa vybere). Sorri !

PS : scrubbing. Este predtym ako to povie volakto, to poviem ja : ked dojde k chybe v pamatiach, zle udaje sa uz zapisu na disky. Cize mozeme scrubbovat kolko chceme, zle data opeciatkujeme ako dobre. Za poslednych skoro 30 rokov si nepamatam, ze by som nevedel rozbalit nejake spakovane subory lebo CRC error lebo sa zle data zapisali na disky kvoli non-ECC pamatiam.

[Marto]

PS : scrubbing. Este predtym ako to povie volakto, to poviem ja : ked dojde k chybe v pamatiach, zle udaje sa uz zapisu na disky.

To záleží od toho, čo používaš za FS nie?

ziadny realny server nevie chodit bez ECC. Dekady.

Vážne? Veď si sám napísal, že krvavo po ECC nejdeš ani v serveroch, tak máš skúsenosť alebo si to blbo napísal A že žiaden reálny server bez ECC nevie chodiť je tiež pipkovina. Nepredával by sa taký HW, viď link + za server vieš predsa prehlásiť aj doma na kolene vyskladanú skladačku...

https://www.asrockrack.com/general/prod ... ifications

>> Server s ECC aj informuje, koľko bitov opravil, keď chybu zistí.
mozem sa opytat, kolko bitov dokaze zistit a kolko dokaze opravit ? My v tomto trosku tápame so Zoomom aj s Molnym, sme taki začiatočníci.

Ak nebudem reagovať na Tvoj sarkazmus, ale použijem svoj, tak: Na to, že Ťa tie servery živia celý život celkom vtip... Dell to mal v biose v logoch, VMware to má v HealthStatuse, na Proxmoxe som si doinštaloval rasdaemon, ale vieš si to zistiť aj z výpisov. EDAC predsa v kerneli funguje dlho, tak stačí pár príkazov. dmesg a dmidecode Ti povie, čo používaš. Vo Windowse to bude tiež zistiteľné, len tam som to vážne neskúmal. A ak si fakt lama, tak to vie zistiť aj memtest myslím. Príklad nižšie CE je opraviteľné, UE neopraviteľné a pre zooma príloha - Ryzen 3700x + x470.

Kód: Vybrať všetko

marto@pve:~# ras-mc-ctl --error-count
Label                   CE      UE
mc#0csrow#1channel#1    0       0
mc#0csrow#3channel#1    0       0
mc#0csrow#0channel#0    0       0
mc#0csrow#2channel#0    0       0
mc#0csrow#0channel#1    0       0
mc#0csrow#2channel#1    0       0
mc#0csrow#1channel#0    0       0
mc#0csrow#3channel#0    0       0

MemTest 2023-08-20 094957.png

Peknú nedeľu ;-)

[mp3turbo]

Prosim vyhlasujem, ze pan autor temy ECC pamate zavrhol a nebude ich mat.
Nespravil tym absolutne ziadnu zivotnu chybu a jeho NAS nevybuchne do desiatich minut od sprevadzkovania.




>> PS : scrubbing. Este predtym ako to povie volakto, to poviem ja : ked dojde k chybe v pamatiach, zle udaje sa uz zapisu na disky.
> To záleží od toho, čo používaš za FS nie?

samozrejme ze nie. Ked sa porusia data v non-ECC pamati este predtym ako ich zapises na disky, tak ich proste na disky zapises porusene. A oni budu vyzerat spravne, vsetky kontrolne sumy a vsetky detekcne mechanizmy diskovych errorov prejdu v pohode.

Do pamate posles 1111111111101111111, kozmicke ziarenie ti zmeni jeden bit a v pamati sa teda objavi 1111111111101110111 ale my o tom nevieme ze takato galiba sa stala. Na disky zapises string s dvomi nulami, vyratas kontrolne sumy, zapises kontrolne sumy. Dve nuly vsade sedia, vsetko v poriadku.

Ale taketo veci nemusim vysvetlovat, ty to predsa vies.





>> Veď si sám napísal, že krvavo po ECC nejdeš ani v serveroch, tak máš skúsenosť alebo si to blbo napísal

alebo to niekto blbo precital. Ine pamate ako ECC proste v serveroch nepouzijes, je to tak uz 20 rokov.
Nikdy som nenapisal ze v serveroch nejdem po ECC. Taku moznost absolutne vobec nemas.




>> A že žiaden reálny server bez ECC nevie chodiť je tiež pipkovina. Nepredával by sa taký HW, viď link + za server vieš predsa prehlásiť aj doma na
>> kolene vyskladanú skladačku...

poprve, to co si linkoval NIE JE server, ale ZAKLADNA DOSKA. Podruhe, ked niekto prehlasi doma na kolene urobene Raspberi Páj za server, pripadne notebook Acer lebo na nom bezi NGINX web soft, to este vobec neznamena ze je to naozaj server. Ako pisem, SKUTOCNE SERVERY nevedia bez ECC chodit a nech to je koniec diskusie prosim.




Co sa tyka tej najspornejsej casti diskusie pochadzajucej z tvojej hlasky " Server s ECC aj informuje, koľko bitov opravil, keď chybu zistí. "
podavam nasledujuce vysvetlenie v plnom rozsahu : ECC pamate dokazu opravit JEDEN JEDINY BIT A NIE VIAC.

ECC pamate dokazu ZISTIT korupciu dvoch bitov [v jednom "slove"] ale nedokazu opravit, a za stastnych okolnosti dokazu ECC pamate zistit zmenu troch alebo viacerych bitov, avsak nemaju sancu opravit [ zdoraznujem : ZA STASTNYCH OKOLNOSTI, rozhodne nie vzdy ].


AMD ECC support na klientskych procesoroch : "ECC is not disabled. It works, but not validated for our consumer client platform."

[zoom]

Este k Ryzen a ECC. Ono to funguje, ale s beznym Ryzenom. APU (CPU + GPU) nepodporuju ECC mimo Ryzen Pro modelov. A ja nejdem do file servera pchat grafiku, aby som si mohol kupit ECC pamate. Kebyze to je jednoducha vec na styl "akykolvek Ryzen podporuje ECC neoficialne", tak kupim drahsie pamate. Ale skumat chujiny... tento podporuje, tento vobec a ked chcete, tak musite zhanat tazko dostupny APU alebo vsak si tam dajte grafiku... meh.

[LordKJ]

5650GE sa da pohode zohnat na ebayi ale ano je to ebay a z ciny

[Marto]

...A ja nejdem do file servera pchat grafiku, aby som si mohol kupit ECC pamate....

Nemám v stroji extra grafiku, doska má ASPEED AST2500, ktorý sa postará o potrebné.

Prosim vyhlasujem, ze pan autor temy ECC pamate zavrhol a nebude ich mat.
Nespravil tym absolutne ziadnu zivotnu chybu a jeho NAS nevybuchne do desiatich minut od sprevadzkovania...
...

Myslím, že takému multitalentu, ktorý sa chytá aj slamky, teda skôr chytá za slovíčka, sa neoplatí oponovať, aj keď si sám vyvráti priamo to, čo napísal(neprečítal som to blbo, prečítaj si znenie svojho pôvodného krvavého výtvoru sám).

Pri scrube si si odpovedal sám, prečo ECC. Zfs si self healing pri správnej konfigurácii vie poriešiť, ale to určite tiež vieš A tak ma napadá, nemáme sa rovno k Ashtarovi modliť priamo a pridať k "Vesmírnym ľuďom" chlape? Pretože kozmické žiarenie, aj keď je okrajovo spomínané pri použití ECC, ma vážne nenapadlo pri ECC korekcii jedného bitu, čo sa sumárne v logoch zobrazí, že sa opravilo/neopravilo xy bitov, aby som bol presný. Zoomov server na výlet do vesmíru snáď nepôjde...

To, že veľkí vendori riešia v štandardných konfigoch len ECC v posledných pár rokoch máš pravdu, ale ak by si veľmi chcel, tak ich vieš pritlačiť do stavu, že Ti dajú extra BIOS, ktorý bude fungovať v režime ako ASRock / Supermicro, len sa okamžite zrieknu supportu - skúsenosť s Dellom. Sám vidíš dosku, ktorá je na domáci server/NAS a v pohode a spapká aj nonECC, tak nevymýšľaj že je to doska a nie celý server, lebo tá doska sa do servera použiť dá, stačí dokúpiť ostatné komponenty. Čiže zase len slovíčkarenie z Tvojej strany. Tu máš aj kvázi blade, ktorý sa predával normálne a všimni si časť "System Memory (per node)" a myslím, že v tejto téme ide zrovna o skladačku a nie rackový server od etablovaného vendora, čo spĺňa aj predtým linkovaná doska, že

https://www.supermicro.com/en/products/ ... H24TRF.cfm

HOWGH