VMWARE + CHR packetloss + nizka priepustnost per connection pri zatazeni

mito

Zdravim Vas, nasadili sme VMWARE + CHR na Xeone + Intel SFP+ sietovky ako hlavny gateway. CPU vyrazne kleslo oproti CCR1036 pri 2,5Gbps no objavil sa nam packetloss a so zvysujucim zatazenim pocas dna sa znizuje rychlost per connection aj ked nie je vyuzita cela dostupna kapacita pripojenia. Touto cestou by som Vas chcel poprosit ako debugovat dany problem, teda najst uzke hrdlo? Zatial sme nenasli ziadny symptom.

Dakujem

zdeneksvarc

mito Virtualizované ethernety jsou pomalé, pro představu: http://vmstudy.blogspot.com/2010/04/network-speed-test-iperf-in-kvm-virtio.html

Hodí se to do cloudového scénáře, ale nehodí do carrier prostředí 💁🏻‍♂️ Je třeba jít co nejblíž k železu 💪

milankovar

mito
Mame stejny problem, nevyresili jsme to.
Jak routerem tece vic nez 2Gbit/s roste packet loss. A vzhledem k tomu, ze na stejnym stroji Linux funguje bez packet lossu, tak je to podle me problem mikrotiku.

mito

Tu je hw konfiguracia:
1 x PowerEdge R620 | iDRAC7 Express | 2* 1Gb Ethernet | 2* 10 Gbit X520 SFP
2 x CPU Intel Xeon E5-2650 v2 8-Core 2.60 GHz 20 MB SmartCache SR1A8
1 x 16 GB (2x 8GB) DDR3

crazyape

Proč jste to dělali ve virtualu a nenahodili normálně mikrotik?

mito

crazyape nepodarilo sa nam nainstalovat routeros napriamo, pri instalacii vzdy zamrzla klavestnica

hapi

Mě by zajímalo co ho vedlo k tomu postavit virtual na 8 let starým, pouze 2.6GHz cpu a ještě k tomu na dual socketu. To si se vsadil o to kdo postaví nejvíc nemoznejsi router nebo co?

Máš aspoň ve virtualu zvolený ethernety typ vmxnet3?

mito

S vytazenim CPU neevidujeme problem. Co sa tyka interfacov skusali sme ich aj napriamo cez passthrough a nedoslo k zasadnej zmene. Otazka znie ako identifikovat problem?

hapi

mito koukni do biosu jakej power management je nastavenej. Tyhle firemní stroje mají většinou nastaveno optimal což je že bios řídí stavy cpu a ne OS což je hodně špatně. Pro virtuály to je fuk ale pro IO operace je to smrt. Mělo by tam být custom nebo že to řídí OS. Pak to celí převezme OS a bios to nebrzdí nízkými stavy.

crazyape

mito Nainstaluj si to v nějakém pc se starší deskou ideálně s ps2 kdy ještě mikrotik má podporu a pak disk prehod do serveru a jdi už rovnou winboxem. Problém solved a dal už nemusíš nic řešit. Pokud neuvidí ani sitovky tak sis proste spatne vybral železo. V mikrotik v7 by to už mělo byt lepší.

hapi

mito nainstaluj si do virtualu mikrotik třeba na 1GB disk. Nabootuj nějaký live linux, Vykopíruj DDčkem někam pryč. Nabootuj přímo na železe live linux, DDčkem na fyzickej disk vrať disk zpět, gpartem roztahni poslední oddíl. Po nabootování mikrotiku udělej reset. Pak až můžeš zapsat licenci mikrotiku.

zdeneksvarc

@crazyape @mito Nebo? https://wiki.mikrotik.com/wiki/Manual:Woobm

hapi

vypnout RPS v mikrotiku a nastavit ručně IRQ. Vše je to o nastavení. Podobný stroj spravuji a dá víc než 2Gbit.

paleto

hapi RPS mame vypnute, IRQ je rucne nastavene, skusali sme to nastavit aj iba na jeden fyzicky procesor, ale spravalo sa to tak isto. Power management v biose je nastaveny na performance mode. Ako spominal kolega na domnou, tak sietova karta bola najprv namapovana passthrough, a potom sme to prehodili na vmxnet3.

Aku verziu VMWARE pouzivate? A typ virtualky pre CHR mate Ubuntu 64bit?

hapi

vmware má v terminalu esxtop. Zkus ho prozkoumat a uvidíme co najdeš. Na mk foru jsou i lidi s virtuály přesahující desítky Gbit.

Ještě bych zkontroloval na jakou sběrnici je připojená ta 10Gbit karta. Stačí se splést o slot a problém je na světě.

paleto

Tak nakoniec sa nam podarilo nainstalovat routeros x86 priamo, pomocou live linuxu z virtualky a problem so stratov paketov sa vyriesil. Vyzera to tak ze aj vykonovo je to takto lepsie.

Dakujeme za pomoc