Help us enhance your Sophos Community experience. Share your thoughts in our Sophos Community survey.

Thread Info
  • State Not Answered
  • Replies 55 replies
  • Subscribers 0 subscribers
  • Views 37499 views
  • Users 0 members are here
Options
Suggested

[9.194-5][BUG]Intel NIC crashes under load

RFCat_vk_01
This possibly a duplicate report.
I have been trying to do some performance reporting using two different sets of hardware built with the latest ISO.

One the NIC goes off line under load, kernel log shows a problem. BarryG advises there is an issue with the current driver.

I would provide the log entries, but that period of testing in now full of *, wrong UTM. Will need to bring the other UTM up to extract the log entries.

I changed the the NIC for another of the same type and model and got the same results. 

Ian


2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536] e1000e 0000:00:19.0 eth0: Detected Hardware Unit Hang:
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536]   TDH                  
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536]   TDT                  
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536]   next_to_use          
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536]   next_to_clean        
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536] buffer_info[next_to_clean]:
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536]   time_stamp           
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536]   next_to_watch        
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536]   jiffies              
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536]   next_to_watch.status 
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536] MAC Status             
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536] PHY Status             
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536] PHY 1000BASE-T Status  
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536] PHY Extended Status    
2014:02:08-14:37:56 Cats-speed kernel: [ 2178.936536] PCI Status             
2014:02:08-14:37:57 Cats-speed kernel: [ 2179.944779] e1000e 0000:00:19.0 eth0: Reset adapter unexpectedly
2014:02:08-14:38:00 Cats-speed kernel: [ 2183.235199] e1000e: eth0 NIC Link is Up 1000 Mbps Full Duplex, Flow Control: Rx/Tx

  • 0 in reply to Dr. ECKEROTH
    Hi Martin,
    I saw you amended commands.
    Thank you for the change cmd which I will try out shortly.

    Ian
  • 0
    We are planning to release a fix for this issue in Version 9.200.
  • 0
    Guys, small question.

    So far the adapters under question are:
    -Intel 82572EI NIC (barry)
    -Intel Corporation 82579LM Gigabit Network Connection (martin)
    -Intel Ethernet Connection I217-V (ian)

    Did u have this problem in 9.1? Thanks,
    Bianca
  • 0 in reply to Tinkerbell
    Guys, small question.

    So far the adapters under question are:
    -Intel 82572EI NIC (barry)
    -Intel Corporation 82579LM Gigabit Network Connection (martin)
    -Intel Ethernet Connection I217-V (ian)

    Did u have this problem in 9.1? Thanks,
    Bianca


    Short answer -> NO. The adapter reset was introduced in this beta [8-)]

    // Martin
  • 0 in reply to ECKEROTH

    And I don't have 20-nic.rules in /lib/udev/rules.d/

    // Martin


    Martin ,

    The file is in /etc/udev/ not in lib/....
    Just run a  vim /etc/udev/rules.d/20-nic.rules and open directly the file.
    thx
  • 0 in reply to Tinkerbell
    Martin ,

    The file is in /etc/udev/ not in lib/....
    Just run a  vim /etc/udev/rules.d/20-nic.rules and open directly the file.
    thx


    Hi Bianca

    Found it: TSO is OFF. Do you want me to enable?

    When trying to run nic-rules command i've get this error: 
    fw:/home/login # /lib/udev/nic-disable-tso

    /lib/udev/nic-disable-tso: line 8: DEVPATH: parameter null or not set

    fw:/home/login # /lib/udev/nic-disable-gro

    /lib/udev/nic-disable-gro: line 7: DEVPATH: parameter null or not set

    fw:/home/login #


    // Martin
  • 0 in reply to ECKEROTH
    Hi martin,

    no no dont enable tso.

    gro and gso are shown as ON from the output. Lets disable it and run the load test again.
    please run: /sbin/ethtool -K eth1 gso off gro off

    i saw eth 1 is the one that crashes on ure machine.
    the whole purpose is to have those parameters mentioned in my post disabled.

    best
    bianca
  • 0 in reply to Tinkerbell
    This is the output: 
    fw:/home/login # /sbin/ethtool -K eth1 gso off gro off

    Actual changes:

    tcp-segmentation-offload: on

            tx-tcp-segmentation: on

            tx-tcp6-segmentation: on

    generic-segmentation-offload: off

    generic-receive-offload: off

    fw:/home/login #


    Status on eth1 is now: 

    fw:/home/login # /sbin/ethtool -k eth1

    Features for eth1:

    rx-checksumming: on

    tx-checksumming: on

            tx-checksum-ipv4: off [fixed]

            tx-checksum-ip-generic: on

            tx-checksum-ipv6: off [fixed]

            tx-checksum-fcoe-crc: off [fixed]

            tx-checksum-sctp: off [fixed]

    scatter-gather: on

            tx-scatter-gather: on

            tx-scatter-gather-fraglist: off [fixed]

    tcp-segmentation-offload: off

            tx-tcp-segmentation: off

            tx-tcp-ecn-segmentation: off [fixed]

            tx-tcp6-segmentation: off

    udp-fragmentation-offload: off [fixed]

    generic-segmentation-offload: off

    generic-receive-offload: off

    large-receive-offload: off [fixed]

    rx-vlan-offload: on

    tx-vlan-offload: on

    ntuple-filters: off [fixed]

    receive-hashing: on

    highdma: on [fixed]

    rx-vlan-filter: off [fixed]

    vlan-challenged: off [fixed]

    tx-lockless: off [fixed]

    netns-local: off [fixed]

    tx-gso-robust: off [fixed]

    tx-fcoe-segmentation: off [fixed]

    fcoe-mtu: off [fixed]

    tx-nocache-copy: on

    loopback: off [fixed]

    rx-fcs: off

    rx-all: off

    fw:/home/login #


    // Martin
  • 0
    ok cool.
    can u run some traffic? lets see if it crashes again.

    About aspm. How to's:
    - check the status for it: run lspci -vvv -d "deviceid" | grep ASPM and replace"deviceid" with the value you get from "lspci -n" for your adapter (+-19.0) 

    Some documentation about aspm: ASPM - Linux Wireless

    bianca
  • 0
    @Ian/ barry 
    If u have tso/gro/lro enabled please run /sbin/ethtool -K $INTERFACE tso off gso off lro off gro off so we disable all of these options from the board. then run traffic again !

    thanks u all for checking! [;)]
Unfiltered HTML