10G domaca siet

[togo]

Ahojte, chcel by som sa informovat o moznostiach vytvorenia 10 Gigabitovej (dalej 10G) domacej siete, resp. stacilo by 10G spojenie medzi PC a NAS.

Pouzivam Mikrotik CSS326-24G-2S+RM switch s dvoma SFP+ portmi (aktualne neobsadenymi) z ktoreho mam po celom dome roztiahnutu Gigabit LAN po CAT6A kabloch. Switch je v Racku, v ktorom mam aj NAS - PC pouzivany ako NAS, beziaci na Linuxe. Na dalsom mieste mam domaci (client) PC - vzdialeny cca 10m. Do tohto PC by som chcel rychlejsie pripojenie (aktualne na Gigabit-e to ide stabilne okolo 100MBps) na prenos suborov/pracu s datami priamo na serveri (napr. strih videa).

Uvazujem o kupe novej sietovej karty s SFP+ portom do serveru a pripojenim ho do switchu cez DAC kabel. Takto by malo frcat spojenie medzi serverom a switchom 10G rychlostou (teoreticky cca 100MBps prenos suborov z 10tich klientov pripojenych gigabitom,. ak zanedbam rychlostne obmedzenie diskov v serveri).
Ako vsak pripojit client PC cez 10G? Pojde to cez sietovu kartu s SFP+ portom v client PC + RJ45 moduly na oboch stranach (v PC a switchi)?
Pri client PC mam na stene CAT6A zasuvky.

Hladam co najjednosuhsie a najlacnejsie riesenie, najlepsie s vyuzitim existujucich kablov.

Dakujem za rady.

[mp3turbo]

cat6a mas na 10 metrov v tazkej pohode pri normalnej karte. Kartu este nemas, ze ? Co planujes kupit ?
SPF+ modul ti dava volnost, vies tam pichnut aj metaliku aj optiku, preto to vzniklo.

Ja pouzivam Brocade BR-1020 ale su to obstarozne PCI-Express 2.0 [!] typy, desinu vytiahnu. Funguju v tom vsetky DAC kable na rozdiel od tych modernych zmrdov s "vendor lock-in" jaaaaaj boze tento kablik nema nas modul takze je fujfuj.

Pozor na sloty na motherboarde, nie vsetky su zapojene v najvyssej rychlosti a mnohe maju zdielanu komunikacnu linku z chipsetu co by ale nemal byt problem. Disky v serveri budu najdolezitejsia vec : ak mas NVMe SSD, tak samozrejme v pohode, 1.2GB/s daju, ak mas disky, tak tie nedaju 1.2GB/s ani v RAIDe ani pri citani pokial ich nemas aspon 8 a prazdne medium cize na zaciatku kde su stopy najvacsie, bez fragmentacie filesystemu atd. V pripade "NAS beziaceho na Linuxe" je strasidelne dolezite aky filesystem tam mas (drzim palec s performance tuning na ZFS) a ake nastavenia tam mas. Je toho tisic, fakt ze tisic.

Na editovanie videa ti najlepsie posluzi lokalny storage. Kludne maj "repository" na sietovom disku/serveri, ale ked chces nieco zurivo robit, pekne nakopirovat 100-300GB k sebe domov na masinu, spravit co je treba, naprdiet naspat na server. Ten cas straveny tymto sposobom (pri prenose 1GB/s to neni az taky problem, 5 minut) sa ti bohato vrati pri praci samotnej a hlavne ked vies ze volaco budes robit, tak si mozes nechat veci kopirovat na pozadi predcasne.

Nieco taketo potrebujes do switchu : https://datacomp.sk/mikrotik-sfp-modul- ... 64428.html
a do karty napodobne.

[mp3turbo]

napoveda : intel x540 dvojportovka sa da zohnat okolo 40,-dolarov na ebayi,,, samozrejme plus nejaka doprava a DPH k tomu. Ja som hentie obstarozne Brokady kupoval sest rokov dozadu po 8,-dolarov kus, bral som ich 40 lebo do labaku do firmy atd.

Uz nemam ziadne volne, inak by som ti nejaku poslal na vyskusanie.

[togo]

Sietovky zatial nemam. Obzeram sa na ebay po nejakych, najviac sa mi pozdava Mellanox MNPA19-XTR - 2x sietovka + kabel za cca 70€ + DPH pravdepodbne (kedze Hong Kong).

[mp3turbo]

na hentie ConnectX-2ky pozor, to su rovnako stare bastardy ako tie Brocade BR1020 co som pisal. Aby boli drivre na to v OS ktory pouzivas atd.
https://network.nvidia.com/related-docs ... _Cards.pdf
posledny fimware ak dobre pozeram z roku 2012 [!], atd. PCI-Express 2.0.


ConnectX-3 40Gbit (upgradovatelne firmware na 56Gbit) som videl po 40 dolaroch, bez kablu.

[pyre]

Ja som kupoval pred rokom 2 kusy za 75 (bez kabla)
Idu aj pod win 10 aj pod win 11.

Mellanox MCX311A-XCAT CX311A ConnectX-3 EN 10G Ethernet 10GbE SFP+

[mp3turbo]

... tak ako hovorim takto jednoduche by to uz nemuselo byt s ConnectX-2kami, ved pozri ci su ovladace...
WinOF VPI drivre uz podporuju len X-3 a vyssie. X-2ka tam nie je.
https://network.nvidia.com/products/ada ... -2/#tabs-1
https://network.nvidia.com/products/ada ... -2/#tabs-2
support matrix : https://network.nvidia.com/support/firm ... of_matrix/


neviem ci toto je najlepsi zdroj : https://developer.nvidia.com/networking ... t-software
v kazdom pripade by som dnes uz ConnectX-2ky jednoducho nekupoval. Okrem otaznej podpory drivrov je to proste PCI-Express 2.0, zhodi ti celu zbernicu dole, obrovska otazka je kompatibilita s konkretnymi biosom konkretnej zakladnej dosky, proste nie... Mam taky dojem ze hore linkovane WinOF drivre dva roky stare su uz posledna verzia pre connectx-3, uz sa s tym nvidia srat nebude. X-3ky su proste tiez na odpis.


Zase pravda je ze aj ten Intel x540 co som spominal je v2.1... nie je to sice 2.0 ale tiez je to zastarale ale hlavne je to original Intel takze snad s vacsou sancou na bezproblemovy chod v akejkolvek doske (je obrovsky rozdiel pci 2.1 versus 2.0) PLUS ROZHODNE OVLADACMI PODPOROVANE V DNESNYCH OS !!

https://www.intel.com/content/www/us/en ... kw=x540-t2
https://www.intel.com/content/www/us/en ... kw=x540-t2
posledna verzia : 9.2.2022 hupsik este teple z rury a samozrejme to chodi aj na Win2022, Win11 a vsetkych linuxoch bez najmensieho rozmyslania.

takze to fungovat PROSTE BUDE A ESTE HODNE DLHO, PRETOZE INTEL BUDE VYDAVAT NOVE DRIVRE. To je obrovska vec...

Mozno by pre teba bola schodna aj cesta tzv. converged adapterov, je to vlastne fiber-channel (storage technologia postavena na inom protokole nez ethernet) PLUS ethernet v jednom adapteri. Ten fiber-channel si proste vsimat nebudes a hotovo. Nenapada ma konkretny typ, HP NC522 a novsie modely, len 522ka je tiez starucka pci-express 2.0 takze ten typ urcite nie.

Proste... ak to chces mat jednoduche tak Intel x540.
Ak sa chces vela naucit, stravit vela casu, mat problemy s kartami a potom ich vyhodit a nahradit intelom 540, tak kludne hocico

[Hexaris]

https://smicro.sk/supermicro-aoc-stgn-i ... -s-card-lp

Ako aj dual, extralink to zozerie, mikrotik modul tiez … Mikrotik OS to pozná ako klasiku intel. Len tu je rozdiel ze to nie je vendor lock. Verim ze FS napr pre intel by to zožralo.

[mp3turbo]

bohuzial je to neporovnatelne drahsie nez bolo povodne planovane. Si zober hento krat dva atd...

[Hexaris]

Jasne chapem. Je pravda, ze by to slo kupit cez ebay, ale to vyssie spomenute bude fungovat tiez Obcas som s cenou mimo ... mimo klasickeho smrtelnika.

[togo]

A co poviete na TOTO? Bolo by to pouzitelne?
Inak Intel x540 neviem najst na ebay za rozumnu cenu, vsetko az okolo 100€ za jednu kartu.

[mp3turbo]

na akekolvek HP ked chces najst detaily, tak guugluj "HP xxxx quickspecs". Dovedie ta rovno na stranku s tym produktom ; v pripade 530FLR je to https://support.hpe.com/hpesc/public/do ... -c03222227

ovladace : https://support.hpe.com/connect/s/?language=en_US
-> https://support.hpe.com/connect/s/produ ... ndSoftware
posledne update 2015, 2016, to nevyzera na modernu ze nie este bacha na hentie FLR modely (FlexibleLOM), vsimni si ako fyzicky ta karta vyzera a rozmyslaj ako by si ju upevnil v standartnom slote standartneho pocitaca. Hento je na mieru site Generation8 serverom HPcka (dl360 Gen8, dl380 Gen8...).


zacnime od zaciatku : na aky OS to chces ? Napriklad "klient Win10, v buducnosti Win11, domace NAS na softe FreeNAS 11.x".

[togo]

OK, takze klient PC aktualne Windows 10 Pro, server Linux Debian 11

napoveda : intel x540 dvojportovka sa da zohnat okolo 40,-dolarov na ebayi,,, samozrejme plus nejaka doprava a DPH k tomu

Link by sa nenasiel?

[mp3turbo]

takmer 40$ :
https://www.ebay.com/itm/165331070046?h ... Sw5rZh5H7b
https://www.ebay.com/itm/165343528829?h ... Swt~JiBuZd

alternativy pre teba mozu byt HP 561T : https://www.ebay.com/itm/125161849739 lebo je to Intel X540 karta, len to uz neni $40. Skus hladat please.
https://www.hpe.com/psnow/doc/c04111372 ... -psnow-red
https://support.hpe.com/hpesc/public/do ... -c03909467


s Debianom 11 som uplne mimo, dufal som ze povies ESX virtualizacia lebo tam je podporovanych strasidelne vela adapterov ktore uz ani na WIn2019 nemaju drivre.

od HPcka by si mohol pozret typ 548 : https://support.hpe.com/hpesc/public/do ... cale=en_US kedze je podporovany na Generation 10 serveroch cize aktualnej triede, urcite chodi s Win2019 a tympadom aj Win10. Je to Mellanox ConnectX-4 karta : https://support.hpe.com/hpesc/public/do ... cale=en_US
https://support.hpe.com/connect/s/searc ... Results=25



Ja este pouzivam aj Broadcomy 57810 na ESX, tam su oficialne podporovane aj vo verzii 6.7 aj na poslednej 7.x generacii.
https://www.ebay.com/itm/353911590781


edit : riskantna ale lacna alternativa ktoru som nepreskumal : Emulex 14100 rada https://www.ebay.com/itm/353885747582
je to relativne moderne, mohlo by to chodit, ale netusim Debian a hlavne neviem ako sa k tymto "converged" teda Ethernet/HBA kartam postavi ina infrastruktura ktoru mas.
Mne to na ESX chodi aj v ethernetovom aj v HBA rezime. Lenze ESX nie je Windows10.

[Hexaris]

Pod linuxom bud je native podpora cez kernel alebo exsituje modul, pripadne kompilujes zo zdrojakov. Lepsia by bola nativna podpora. Ne distre az tak nezalezi. Treba pozriet stranky vyrobcu ake drivere ponuka. V rpm balickoch sa to da prekonvertovat aj na debian. Pripadne to proste vyextrahujes a rucne nahadzes do systemu. Toto vsak pre laika moc nie je.