Потеря пакетов на внешнем интерфейсе

[oermolaev]

Об этой проблеме я уже писал в другом разделе.
И сейчас не уверен что пишу в нужный раздел. Не аппаратное ли это?

пинг изнутри:

--- ubuntu.ru ping statistics ---
100 packets transmitted, 93 received, 7% packet loss, time 145798ms
rtt min/avg/max/mdev = 22.968/23.363/24.011/0.266 ms

пинг снаружи:

ping statistics ---
100 packets transmitted, 86 received, 14% packet loss, time 98998ms
rtt min/avg/max/mdev = 0.314/0.408/0.698/0.042 ms

(Нажмите, чтобы показать/скрыть)

1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 74:d4:35:18:bf:f7 brd ff:ff:ff:ff:ff:ff
3: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 74:d4:35:18:bf:f5 brd ff:ff:ff:ff:ff:ff
4: vmbr0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc noqueue state UNKNOWN
    link/ether 74:d4:35:18:bf:f7 brd ff:ff:ff:ff:ff:ff
    inet 87.255.230.XXX/27 brd 87.255.230.YYY scope global vmbr0
    inet6 fe80::76d4:35ff:fe18:bff7/64 scope link
       valid_lft forever preferred_lft forever
5: vmbr1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc noqueue state UNKNOWN
    link/ether 74:d4:35:18:bf:f5 brd ff:ff:ff:ff:ff:ff
    inet 192.168.10.1/24 brd 192.168.10.255 scope global vmbr1
    inet6 fe80::76d4:35ff:fe18:bff5/64 scope link
       valid_lft forever preferred_lft forever
6: venet0: <BROADCAST,POINTOPOINT,NOARP,UP,LOWER_UP> mtu 1500 qdisc noqueue state UNKNOWN
    link/void
    inet6 fe80::1/128 scope link
       valid_lft forever preferred_lft forever

(Нажмите, чтобы показать/скрыть)

87.255.230.ZZZ/27 dev vmbr0  proto kernel  scope link  src 87.255.230.XXX
192.168.10.0/24 dev vmbr1  proto kernel  scope link  src 192.168.10.1
default via 87.255.230.BBB dev vmbr0

(Нажмите, чтобы показать/скрыть)

1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN mode DEFAULT
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    RX: bytes  packets  errors  dropped overrun mcast   
    14874      89       0       0       0       0     
    TX: bytes  packets  errors  dropped carrier collsns
    14874      89       0       0       0       0     
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP mode DEFAULT qlen 1000
    link/ether 74:d4:35:18:bf:f7 brd ff:ff:ff:ff:ff:ff
    RX: bytes  packets  errors  dropped overrun mcast   
    20978859   32722    0       0       0       0     
    TX: bytes  packets  errors  dropped carrier collsns
    7788164    32170    0       0       0       0     
3: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP mode DEFAULT qlen 1000
    link/ether 74:d4:35:18:bf:f5 brd ff:ff:ff:ff:ff:ff
    RX: bytes  packets  errors  dropped overrun mcast   
    4814562    30526    0       0       0       0     
    TX: bytes  packets  errors  dropped carrier collsns
    22310028   28128    0       0       0       0     
4: vmbr0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc noqueue state UNKNOWN mode DEFAULT
    link/ether 74:d4:35:18:bf:f7 brd ff:ff:ff:ff:ff:ff
    RX: bytes  packets  errors  dropped overrun mcast   
    20413263   30491    0       0       0       56     
    TX: bytes  packets  errors  dropped carrier collsns
    7788578    32179    0       0       0       0     
5: vmbr1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc noqueue state UNKNOWN mode DEFAULT
    link/ether 74:d4:35:18:bf:f5 brd ff:ff:ff:ff:ff:ff
    RX: bytes  packets  errors  dropped overrun mcast   
    4350579    30169    0       0       0       67     
    TX: bytes  packets  errors  dropped carrier collsns
    22272030   27808    0       0       0       0     
6: venet0: <BROADCAST,POINTOPOINT,NOARP,UP,LOWER_UP> mtu 1500 qdisc noqueue state UNKNOWN mode DEFAULT
    link/void
    RX: bytes  packets  errors  dropped overrun mcast   
    0          0        0       0       0       0     
    TX: bytes  packets  errors  dropped carrier collsns
    0          0        0       3       0       0

Материнская плата с двумя интегрированными интерфейсами:

(Нажмите, чтобы показать/скрыть)

/W path         Device     Class          Description
======================================================
                            system         To be filled by O.E.M. (To be filled by O.E.M.)
/0                          bus            C1037UN-EU
/0/0                        memory         64KiB BIOS
/0/4                        memory         64KiB L1 cache
/0/5                        memory         512KiB L2 cache
/0/6                        memory         2MiB L3 cache
/0/7                        memory         8GiB System Memory
/0/7/0                      memory         4GiB DIMM DDR3 Synchronous 1600 MHz (0,6 ns)
/0/7/1                      memory         4GiB DIMM DDR3 Synchronous 1600 MHz (0,6 ns)
/0/43                       processor      Intel(R) Celeron(R) CPU 1037U @ 1.80GHz
/0/100                      bridge         3rd Gen Core processor DRAM Controller
/0/100/2                    display        3rd Gen Core processor Graphics Controller
/0/100/16                   communication  7 Series/C210 Series Chipset Family MEI Controller #1
/0/100/1a                   bus            7 Series/C210 Series Chipset Family USB Enhanced Host Controller #2
/0/100/1b                   multimedia     7 Series/C210 Series Chipset Family High Definition Audio Controller
/0/100/1c                   bridge         7 Series/C210 Series Chipset Family PCI Express Root Port 1
/0/100/1c/0      eth0       network        RTL8111/8168/8411 PCI Express Gigabit Ethernet Controller
/0/100/1c.1                 bridge         7 Series/C210 Series Chipset Family PCI Express Root Port 2
/0/100/1c.1/0    eth1       network        RTL8111/8168/8411 PCI Express Gigabit Ethernet Controller
/0/100/1c.2                 bridge         82801 Mobile PCI Bridge
/0/100/1c.2/0               bridge         82801 PCI Bridge
/0/100/1c.3                 bridge         7 Series/C210 Series Chipset Family PCI Express Root Port 4
/0/100/1d                   bus            7 Series/C210 Series Chipset Family USB Enhanced Host Controller #1
/0/100/1f                   bridge         7 Series Chipset Family LPC Controller
/0/100/1f.2      scsi2      storage        7 Series Chipset Family 6-port SATA Controller [AHCI mode]
/0/100/1f.2/0    /dev/sda   disk           500GB ST500DM002-1BD14
/0/100/1f.2/0/1  /dev/sda1  volume         1023KiB BIOS Boot partition
/0/100/1f.2/0/2  /dev/sda2  volume         510MiB EXT3 volume
/0/100/1f.2/0/3  /dev/sda3  volume         465GiB RAID partition
/0/100/1f.2/1    /dev/sdb   disk           500GB ST500DM002-1BD14
/0/100/1f.2/1/1  /dev/sdb1  volume         1023KiB BIOS Boot partition
/0/100/1f.2/1/2  /dev/sdb2  volume         509MiB RAID partition
/0/100/1f.2/1/3  /dev/sdb3  volume         465GiB RAID partition
/0/100/1f.3                 bus            7 Series/C210 Series Chipset Family SMBus Controller
/1                          power          To Be Filled By O.E.M.

Интерфейсы менял местами - не влияет.
Интерфейсы с локальной сети пингуются без проблем
Подключал к провайдеру свой ноутбук - при нескольких тестах потерь 0%-1%.
Т.е. проблема моя, а не провайдера.

[fisher74]

lshw с параметром -c network была бы более информативна по вопросу нежели с -short

[oermolaev]

(Нажмите, чтобы показать/скрыть)

  *-network               
       description: Ethernet interface
       product: RTL8111/8168/8411 PCI Express Gigabit Ethernet Controller
       vendor: Realtek Semiconductor Co., Ltd.
       physical id: 0
       bus info: pci@0000:01:00.0
       logical name: eth0
       version: 06
       serial: 74:d4:35:18:bf:f7
       size: 100Mbit/s
       capacity: 1Gbit/s
       width: 64 bits
       clock: 33MHz
       capabilities: pm msi pciexpress msix vpd bus_master cap_list ethernet physical tp mii 10bt 10bt-fd 100bt 100bt-fd 1000bt 1000bt-fd autonegotiation
       configuration: autonegotiation=on broadcast=yes driver=r8169 driverversion=2.3LK-NAPI duplex=full firmware=rtl8168e-3_0.0.4 03/27/12 latency=0 link=yes multicast=yes port=MII speed=100Mbit/s
       resources: irq:25 ioport:e000(size=256) memory:f7d00000-f7d00fff memory:f0100000-f0103fff(prefetchable)
  *-network
       description: Ethernet interface
       product: RTL8111/8168/8411 PCI Express Gigabit Ethernet Controller
       vendor: Realtek Semiconductor Co., Ltd.
       physical id: 0
       bus info: pci@0000:02:00.0
       logical name: eth1
       version: 06
       serial: 74:d4:35:18:bf:f5
       size: 100Mbit/s
       capacity: 1Gbit/s
       width: 64 bits
       clock: 33MHz
       capabilities: pm msi pciexpress msix vpd bus_master cap_list ethernet physical tp mii 10bt 10bt-fd 100bt 100bt-fd 1000bt 1000bt-fd autonegotiation
       configuration: autonegotiation=on broadcast=yes driver=r8169 driverversion=2.3LK-NAPI duplex=full firmware=rtl8168e-3_0.0.4 03/27/12 latency=0 link=yes multicast=yes port=MII speed=100Mbit/s
       resources: irq:26 ioport:d000(size=256) memory:f0004000-f0004fff(prefetchable) memory:f0000000-f0003fff(prefetchable)

[AnrDaemon]

Может быть из-за

       product: RTL8111/8168/8411 PCI Express Gigabit Ethernet Controller
       configuration: autonegotiation=on broadcast=yes driver=r8169

Вот только нормально собрать драйвера под 8111 на 14.04 нельзя :/

[oermolaev]

Что посоветуете: развязать сеть с провайдером дополнительным роутером, или обойтись usb-Ethernet адаптером?
А может что попробовать "подкрутить" с помощью ethtool?

[AnrDaemon]

Для начала - как минимум посмотреть на счётчики
ip -s l

Ну и попросить провайдера помочь с диагностикой.

[oermolaev]

С провайдером была проведена работа перед написанием этой "жалобы". В результате было установлено что проблема "на стороне клиента".
В счетчиках есть подозрительные цифры на mcast, но о чём это говорит я к сожалению не знаю.

(Нажмите, чтобы показать/скрыть)

1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN mode DEFAULT
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    RX: bytes  packets  errors  dropped overrun mcast   
    138613     729      0       0       0       0     
    TX: bytes  packets  errors  dropped carrier collsns
    138613     729      0       0       0       0     
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP mode DEFAULT qlen 1000
    link/ether 74:d4:35:18:bf:f7 brd ff:ff:ff:ff:ff:ff
    RX: bytes  packets  errors  dropped overrun mcast   
    96066528   84232    0       0       0       0     
    TX: bytes  packets  errors  dropped carrier collsns
    9061907    50638    0       0       0       0     
3: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP mode DEFAULT qlen 1000
    link/ether 74:d4:35:18:bf:f5 brd ff:ff:ff:ff:ff:ff
    RX: bytes  packets  errors  dropped overrun mcast   
    7180245    57664    0       0       0       0     
    TX: bytes  packets  errors  dropped carrier collsns
    91563955   78561    0       0       0       0     
5: vmbr1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc noqueue state UNKNOWN mode DEFAULT
    link/ether 74:d4:35:18:bf:f5 brd ff:ff:ff:ff:ff:ff
    RX: bytes  packets  errors  dropped overrun mcast   
    6316624    57049    0       0       0       97     
    TX: bytes  packets  errors  dropped carrier collsns
    91510116   78090    0       0       0       0     
6: venet0: <BROADCAST,POINTOPOINT,NOARP,UP,LOWER_UP> mtu 1500 qdisc noqueue state UNKNOWN mode DEFAULT
    link/void
    RX: bytes  packets  errors  dropped overrun mcast   
    0          0        0       0       0       0     
    TX: bytes  packets  errors  dropped carrier collsns
    0          0        0       3       0       0     
8: vmbr0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc noqueue state UNKNOWN mode DEFAULT
    link/ether 74:d4:35:18:bf:f7 brd ff:ff:ff:ff:ff:ff
    RX: bytes  packets  errors  dropped overrun mcast   
    94254470   72605    0       0       0       84     
    TX: bytes  packets  errors  dropped carrier collsns
    8959259    49213    0       0       0       0     
root@kbr:~# ip a l
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 16436 qdisc noqueue state UNKNOWN
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
    inet6 ::1/128 scope host
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 74:d4:35:18:bf:f7 brd ff:ff:ff:ff:ff:ff
3: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 74:d4:35:18:bf:f5 brd ff:ff:ff:ff:ff:ff
5: vmbr1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc noqueue state UNKNOWN
    link/ether 74:d4:35:18:bf:f5 brd ff:ff:ff:ff:ff:ff
    inet 192.168.10.1/24 brd 192.168.10.255 scope global vmbr1
    inet6 fe80::76d4:35ff:fe18:bff5/64 scope link
       valid_lft forever preferred_lft forever
6: venet0: <BROADCAST,POINTOPOINT,NOARP,UP,LOWER_UP> mtu 1500 qdisc noqueue state UNKNOWN
    link/void
    inet6 fe80::1/128 scope link
       valid_lft forever preferred_lft forever
8: vmbr0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc noqueue state UNKNOWN
    link/ether 74:d4:35:18:bf:f7 brd ff:ff:ff:ff:ff:ff
    inet 192.168.0.101/24 brd 192.168.0.255 scope global vmbr0
    inet6 fe80::76d4:35ff:fe18:bff7/64 scope link
       valid_lft forever preferred_lft forever

Для диагностики решил временно развязать сервер от провайдера роутером dir-300.
В результате "загнал болезнь внутрь" - вместо потерь пакетов теперь периодически проскакивает задержка.
Статистика от сервера до шлюза провайдера:

Код: [Выделить]

ping statistics ---
200 packets transmitted, 200 received, 0% packet loss, time 199241ms
rtt min/avg/max/mdev = 0.823/2.646/57.042/6.697 ms
В локальную сеть с такого же интерфейса задержек нет:

Код: [Выделить]

ping statistics ---
200 packets transmitted, 200 received, 0% packet loss, time 198999ms
rtt min/avg/max/mdev = 0.502/0.589/0.688/0.034 ms

А вот статистика снаружи до роутера dir-300:

Код: [Выделить]

ping statistics ---
200 packets transmitted, 200 received, 0% packet loss, time 199066ms
rtt min/avg/max/mdev = 0.791/0.879/0.994/0.054 ms

Теперь хоть сервер стал доступен снаружи..

Помогите кто чем может?

[fisher74]

Воткните ещё одну сетевую на другом чипсете и успокойтесь.
Либо, если у Вас 14.04 пробуйте собирать драйвер для 8111, о чём говорил AnrDaemon.
Если же релиз ниже, то сам Торвальдс велел собирать и пробовать.

[oermolaev]

Воткните ещё одну сетевую на другом чипсете и успокойтесь.

спасибо fisher74, как я сам не допёр, там же слот свободный!

[AnrDaemon]

С провайдером была проведена работа перед написанием этой "жалобы". В результате было установлено что проблема "на стороне клиента".
В счетчиках есть подозрительные цифры на mcast, но о чём это говорит я к сожалению не знаю.

(Нажмите, чтобы показать/скрыть)

2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP mode DEFAULT qlen 1000
    link/ether 74:d4:35:18:bf:f7 brd ff:ff:ff:ff:ff:ff
    RX: bytes  packets  errors  dropped overrun mcast   
    96066528   84232    0       0       0       0     
    TX: bytes  packets  errors  dropped carrier collsns
    9061907    50638    0       0       0       0     
3: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP mode DEFAULT qlen 1000
    link/ether 74:d4:35:18:bf:f5 brd ff:ff:ff:ff:ff:ff
    RX: bytes  packets  errors  dropped overrun mcast   
    7180245    57664    0       0       0       0     
    TX: bytes  packets  errors  dropped carrier collsns
    91563955   78561    0       0       0       0     

Для диагностики решил временно развязать сервер от провайдера роутером dir-300.
В результате "загнал болезнь внутрь" - вместо потерь пакетов теперь периодически проскакивает задержка.
Статистика от сервера до шлюза провайдера:

Код: [Выделить]

ping statistics ---
200 packets transmitted, 200 received, 0% packet loss, time 199241ms
rtt min/avg/max/mdev = 0.823/2.646/57.042/6.697 ms
В локальную сеть с такого же интерфейса задержек нет:

Код: [Выделить]

ping statistics ---
200 packets transmitted, 200 received, 0% packet loss, time 198999ms
rtt min/avg/max/mdev = 0.502/0.589/0.688/0.034 ms

А вот статистика снаружи до роутера dir-300:

Код: [Выделить]

ping statistics ---
200 packets transmitted, 200 received, 0% packet loss, time 199066ms
rtt min/avg/max/mdev = 0.791/0.879/0.994/0.054 ms

Теперь хоть сервер стал доступен снаружи..

Помогите кто чем может?

Ошибок не показывает. (mcast - это мультикаст пакеты. Они просто пришли... по жизни. Это не ошибка.)
Возможно, проблема действительно на вашей стороне.
Попробуйте подключиться к этой карте кроссом и прогнать пару гигабайт в обе стороны. А потом посмотреть счётчики ошибок на обоих концах кабеля. Это даст лучшее представление о ситуации.
Карту поменять то конечно можно, но вот так не наменяешься.

[oermolaev]

AnrDaemon, спасибо за совет, я выполню этот тест при возможности, а с завтрашнего дня я в отпуске! Надеюсь так выстоит до моего возвращения