시스템 관리_50 VMware VMXNET3 대 E1000 가상 NIC 네트워크 패킷 드롭 오류 원인 분석 및 링 버퍼 튜닝 해결 가이드

# 1. 게스트 OS 관점: 인터페이스별 패킷 드롭 및 에러 카운터 확인
$ ip -s link show eth0
# 2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP mode DEFAULT group default qlen 1000
#     link/ether 00:50:56:9a:1b:2c brd ff:ff:ff:ff:ff:ff
#     RX: bytes  packets  errors  dropped overrun mcast
#     4521405012 35412090      0   154020       0     0
#     TX: bytes  packets  errors  dropped carrier collsns
#     2140501240 18504010      0        0       0     0
# -> RX 수신 단에서 15만 건 이상의 패킷 드롭(dropped) 발생 확인

# 2. 현재 로드된 가상 NIC 드라이버 모듈 및 하드웨어 모델 확인
$ ethtool -i eth0
# driver: vmxnet3 (또는 e1000, e1000e)
# version: 1.6.0.0-k-NAPI
# firmware-version: N/A
# bus-info: 0000:0b:00.0

# 3. ethtool 상세 통계로 드롭 사유 분석 (링 버퍼 고갈 여부)
$ ethtool -S eth0 | grep -iE "drop|miss|err|overflow"
# [VMXNET3 출력 예시]
#      rx_drops: 154020
#      rx_dropped: 154020
#      rx_buf_alloc_err: 0
#      rx_ring0_drops: 142010
#      rx_ring1_drops: 12010
# -> 커널 수신 링 버퍼 큐(ring0, ring1)가 꽉 차서 하드웨어 수준에서 버려짐 확인

# 4. 현재 적용된 NIC 링 버퍼 크기와 하드웨어 최대 허용치(Pre-set Maximums) 비교
$ ethtool -g eth0
# Ring parameters for eth0:
# Pre-set maximums:
# RX:             4096
# RX Mini:           0
# RX Jumbo:       2048
# TX:             4096
# Current hardware settings:
# RX:             1024
# RX Mini:           0
# RX Jumbo:        512
# TX:              512
# -> 현재 RX 버퍼가 1024로 설정되어 있어 최대치인 4096까지 4배 확장 가능함

# 5. ESXi 호스트 관점: 가상 스위치 포트 레벨 드롭 확인 (esxtop n 뷰)
# ESXi SSH 콘솔에서 'esxtop' 실행 후 'n'(네트워크 뷰) 진입
# PORT-ID    USED-BY           %DRPRX    %DRPTX
# 67108870   Web-Server-01.eth0   4.25      0.00
# -> %DRPRX 가 0% 이상이면 ESXi 가상 스위치 단에서 버퍼 초과로 패킷을 드롭 중임을 확인

#!/bin/bash
# tune_vmware_nic.sh - Diagnose packet drops and tune Ring Buffer on VMware virtual NICs

NIC_NAME=${1:-""}

echo "=========================================="
echo " [VMware 가상 NIC 패킷 유실 진단 및 튜닝]"
echo "=========================================="

if [ "$EUID" -ne 0 ]; then
    echo "  [오류] 네트워크 장치 설정을 변경하려면 루트(root) 권한이 필요합니다."
    exit 1
fi

if ! command -v ethtool &>/dev/null; then
    echo "  [오류] ethtool 유틸리티가 설치되어 있지 않습니다."
    exit 1
fi

# 1. 대상 인터페이스 결정
if [ -z "$NIC_NAME" ]; then
    NIC_NAME=$(ip route | awk '/default/ {print $5}' | head -n 1)
fi

echo "  대상 인터페이스: ${NIC_NAME:-"감지 실패"}"

if [ -z "$NIC_NAME" ] || ! ip link show "$NIC_NAME" &>/dev/null; then
    echo "  [오류] 유효한 네트워크 인터페이스를 찾을 수 없습니다."
    exit 1
fi

# 2. 가상 NIC 어댑터 드라이버 식별
DRIVER_NAME=$(ethtool -i "$NIC_NAME" 2>/dev/null | awk '/driver:/ {print $2}')
echo -e "\n[1] 드라이버 및 어댑터 아키텍처 점검:"
echo "  - 감지된 드라이버: ${DRIVER_NAME}"

case "$DRIVER_NAME" in
    e1000|e1000e)
        echo "  [치명적 권고] 현재 레거시 에뮬레이션 드라이버(${DRIVER_NAME})를 사용 중입니다!"
        echo "  - 사유: E1000은 Intel 82545EM 하드웨어를 에뮬레이트하므로 호스트 CPU 부하가 극심하고 다중 큐(Multi-Queue/RSS)를 지원하지 않아 패킷 유실에 매우 취약합니다."
        echo "  - 조치: vSphere Client에서 가상 머신 네트워크 어댑터 유형을 'VMXNET3'로 변경하십시오."
        ;;
    vmxnet3)
        echo "  [정상] VMware 반가상화(Paravirtualized) 전용 드라이버(VMXNET3)가 장착되어 있습니다."
        ;;
    *)
        echo "  - 비 VMware 계열 또는 표준 물리 드라이버(${DRIVER_NAME})입니다."
        ;;
esac

# 3. RX 패킷 드롭 현황 점검
echo -e "\n[2] RX 패킷 드롭 및 에러 통계:"
RX_DROPPED=$(ip -s link show "$NIC_NAME" | awk '/RX:/ {getline; print $4}')
echo "  - 누적 RX 패킷 드롭 수: ${RX_DROPPED} 건"

# 4. 링 버퍼(Ring Buffer) 설정 확인 및 증설
echo -e "\n[3] 링 버퍼(Ring Buffer) 크기 점검 및 확장:"
RING_INFO=$(ethtool -g "$NIC_NAME" 2>/dev/null)

MAX_RX=$(echo "$RING_INFO" | awk '/Pre-set maximums:/,/Current hardware settings:/' | awk '/RX:/ {print $2}' | head -n 1)
CURR_RX=$(echo "$RING_INFO" | awk '/Current hardware settings:/,/^$/' | awk '/RX:/ {print $2}' | head -n 1)

echo "  - 지원 최대 RX 크기 : ${MAX_RX}"
echo "  - 현재 적용 RX 크기 : ${CURR_RX}"

if [ -n "$MAX_RX" ] && [ -n "$CURR_RX" ] && [ "$CURR_RX" -lt "$MAX_RX" ]; then
    echo "  -> 현재 링 버퍼가 최대치에 미치지 못합니다. ${CURR_RX} -> ${MAX_RX} 확장 적용 중..."
    ethtool -G "$NIC_NAME" rx "$MAX_RX" tx "$MAX_RX" 2>/dev/null
    
    # 튜닝 결과 재확인
    NEW_RX=$(ethtool -g "$NIC_NAME" 2>/dev/null | awk '/Current hardware settings:/,/^$/' | awk '/RX:/ {print $2}' | head -n 1)
    echo "  [완료] 링 버퍼가 ${NEW_RX} 크기로 확장되었습니다."
    
    # 영구 적용 가이드 안내
    echo "  [알림] 재부팅 후에도 유지하려면 네트워크 설정 스크립트(/etc/rc.local 또는 NetworkManager 디스패처)에 'ethtool -G ${NIC_NAME} rx ${MAX_RX} tx ${MAX_RX}' 명령을 등록하십시오."
else
    echo "  [정상] 링 버퍼가 이미 최대 허용치(${MAX_RX})로 구성되어 있습니다."
fi

# 5. OS 커널 수신 큐(netdev_max_backlog) 최적화 제안
echo -e "\n[4] 커널 네트워크 수신 버퍼 파라미터 점검:"
BACKLOG=$(sysctl -n net.core.netdev_max_backlog)
echo "  - 현재 net.core.netdev_max_backlog: ${BACKLOG}"
if [ "$BACKLOG" -lt 5000 ]; then
    echo "  -> 트래픽 폭증 시 커널 큐 드롭 방지를 위해 10000 이상으로 상향을 권장합니다."
    echo "  -> 즉시 적용: sysctl -w net.core.netdev_max_backlog=10000"
fi

echo -e "\n=========================================="
echo " [진단 및 튜닝 완료]"
echo "=========================================="

# 즉시 최대치로 확장 (무중단 적용)
sudo ethtool -G eth0 rx 4096 tx 4096

# /etc/sysctl.d/99-network-tuning.conf
net.core.netdev_max_backlog = 10000
net.core.rmem_max = 16777216
net.core.wmem_max = 16777216