HW pro GW a PPPOE koncentrátor

pgb

protože se mi na X11SCM-LN8F nedaří dostat V7b5 na x86 pomocí instalátoru (iso neexistuje a v6 iso nenabootuje v žádném ide režimu), tak jsem si objednal redukci na msata disk a rozbalím na něj balíček pomocí netinstallu ale bude to trvat zase, nežli přijde redukce

jinak deska X11SCM-LN8F má na těch osmi ethernetech v debianu nadetekováno 4xIRQ na samostný ethernet, ale zajímavé je, že má sdružené TX RX iRQ
IR-PCI-MSI 1572864-edge eno1
IR-PCI-MSI 1572865-edge eno1-TxRx-0
IR-PCI-MSI 1572866-edge eno1-TxRx-1
atd....

hapi

to není zajimavé, to dělají určitě typy chipů. Každopádně 4x IRQ tak akorát na max 4core procáky.

pgb

Jasně, ale proto těch síťovek máš několik a sfp+ karta má těch IRQ mrak. To že jednu gbit síťovou kartu obsloužím čtyřmi jádry mi přijde ok. Teoreticky jestli počítám dobře:
1Gbit lan + 4x IRQ = Max 500Mbps/jádro
10Gbit + 16x IRQ = Max 1,25Gbps/jádro
Počítám tereticky s duplexním plným vytížením. Takže ten gbit je na tom s nárokem na výkon jednoho jádra vlastně lépe.

hapi

teorie je dobrá, praxe bude stát za 💩

nikde jsi nepsal že si tam osadil 8core

rsaf

To počítáš špatně. Tx totiž celkem nic nežere - většina se toho zpracovává v Rx přerušení.
Více síťovek ve stroji taky nic nemusí řešit - většina datového toku je download, často to vše do routeru přichází po jednom rozhraní = 80% zátěže generují přerušení tohoto rozhraní.

pgb

rsaf ina se toho zpracovává v Rx přerušení.
Více síťovek ve stroji taky nic nemusí řešit - většina datového toku je download, často to vše do routeru přichází po jednom rozhraní = 80% zátěže generují p

rsaf jasně, tohle bylo psaný jako čistě teoretický výpočet, vždyť jsem to psal. Reálný provoz je úplně něco jiného, nehledě na to, že vůbec nikde jsem nepsal, že mám router s dvěma lany. Naopak 4xSFP+ a 8xGLAN. Ano, mám jeden WAN, několik LAN a na WANU mám sfp+ s mrakem irq.

pgb

a nikde jsem ani nepsal že jsem osadil 4 core 🙂 ... tak si to hovínko můžeš odpustit, peace

hapi

a navíc to počítáš s hyper threadingem což není dobré

pgb

Na to jsi přišel jak? Počítal jsem propustnost síťovky vs. počet irq na síťovce. HT je mezivrstva v řízení => vypnout. To je diskuze o prdu, nechme to být. Lepší dát si kafe nežli řešit kraviny kdo má delšího pindíka. Jen jsem chtěl podat informace o irq k síťovce ke konkrétní desce.

rseb

2 ttcko: Jak řešíš nějaké best path na bgp? Mám pořád dilema jestli fulltable a nebo jenom default gw z každého upstreamu a nějakou chytrost na pár rout.

rsaf

Pokud máš na full table kapacity/výkon tak je samozřejmě ideální fulltable, protože se pak sám můžeš rozhodovat, co kudy pošleš. Pokud na ta to kapacity nemáš, pak je asi nejlepší si nechat z obou upstreamů poslat defaultroute + věci přímo připojené do sítě toho upstreamu. Větší výzva stejně je rozumně naladit download (propagaci tvých prefixů). Ideální je mít oba upstreamy "s kvalitou bez kompromisů" (a tím pádem neřešit, že tudy bych chtěl spíše nix a tudy zase spíše transit...).

rseb

rsaf no a ten hw je kámen úrazu... na full bgp router v hw nejsou prostredky, takže řešení s nějakou x86 a do dostupného hw (refub l3 switch typu arista ) zase nevejde full bgp, takže přemýšlím, co je cesta...

seppuku

tady inspirace: https://www.youtube.com/watch?v=o1njanXhQqM

jinak v praxi jsem dospěl následujícímu řešení:
a) mám tři upstrem s fulltable + peering + nix
b) všechno co mi přiteče z direct peer přes nix a přes peerig dávam do FIB s localpref 250
c) všechno co přiteče z routeserverů (nix + peering) dávám do FIB s localpref 200
d) hurricane dávám do FIB s localpref 150 (specilitka IPv6, není nutný)
e) default nechávám poslat od všech upstreamu a dávám do FIB
f) svoje prefixy posílám samo všem

takže se mi vybere podle localpref a do FIB dá routa přes directpeer, nebo routeserver, nebo huricane, nebo default.

edit: jen cca 1/3 toku ven teče do defaultu

rseb

seppuku dík za inspiraci.

rsaf

seppuku Tzn. ve FIB máš jen nix+peering a potom 3x defaultroute od od upstreamů)?

seppuku

rsaf no vybere se nejlepsi routa pro kazdej prefix od vsech directpeeru a routeserveru a pak jedna defaultka. Aktualne mam ve FIB pro ipv4 155k rout a pro ipv6 80k rout.

je dobry si uvedomit ze jako ISP...
a) te moc nezajima tok dat ven .. ty se nejak pres ten internet k cili dostanou
b) vic resis odkud data tecou k tobe
c) 80% dat k tobe pritece pres directpeery nebo nix+peering

rsaf

seppuku Jo, to já všechno chápu ;-)
Ty jsi u upstreamů zmiňoval fulltable a potom defaultroute, takže jsem neměl úplně jasno v tom, co od nich vlastně bereš.
Importovat nějaký subset od Tier1 operátorů je asi blbost (buď by toho bylo hodně, nebo by to nemělo moc smysl). Na druhou stranu pokud má někdo dva upstreamy typu "UPC a CETIN" (tedy ne tier1) tak asi má smysl si z CETINu nechat poslat prefixy které oni propoagují ven a nehonit tento traffic zbytečně přes UPC.

seppuku

rsaf to můžeš celkem easy, například tak, že si do FIB nahraješ z těch upstreamů jen to, co má max jedno AS v cestě.

P.S. Cetin není v RS v nix/peering?

johnyboi

rsaf
solidni upstream by mnel umet advertisovat DR + vlastni agregovane + Jeho Tranzitni customeri.

rsaf

seppuku do FIB nahraješ z těch upstreamů jen to, co má max jedno AS v cestě.

To samozřejmě, ale to může být od tier1 operátora taky "půl světa" (a tudíž zbytečně hodně prefixů)

seppuku P.S. Cetin není v RS v nix/peering?

To jsme se nepochopili. Já myslel situaci, kdy menší ISP má koupené dvě konektivity "u sebe na vesnici" - obě "mixované", tedy žádn7 RS v nix/peering se nekoná. V takovém případě mi přijde optimální si od každého vzít defaultroute + vlastní + zákazníky (jak píše johnyboi)

seppuku

rsaf To jsme se nepochopili. Já myslel situaci, kdy menší ISP má koupené dvě konektivity "u sebe na vesnici" - obě "mixované", tedy žádn7 RS v nix/peering se nekoná.

ok, chápu. možností spousta 😋 za mě osobně, když už si pořídíš AS, k tomu BGP routery, tak je hřích nebýt v peering centrech a peerovat "s kým to jde", to je totiž podle mě ten Internet a ty ten ISP.

OT: když už tu řešíme peering, kdokoliv bude mít zájem, pojďte s náma peerovat, propojit se jako NNI, nebo vám klidně udělám upstream.

« Předchozí stránka Další stránka »