안녕하세요 이준용입니다. 연구실에서 NAS를 새로 셋팅하던 중,

TrueNAS SCALE에서 NVMe 기반 NFS 속도가 너무 느립니다 (300MB/s 이하)

현재 TrueNAS SCALE을 이용하여 NAS를 구축하고 있는데, 로컬 디스크 성능에 비해 NFS를 통한 네트워크 성능이 너무 낮게 나와 조언을 구하고자 합니다. 

• CPU: Intel Xeon Silver 4210R

• RAM: 128GB ECC DDR4

• 스토리지: 4TB NVMe 4개 TLC

• TrueNAS SCALE 버전: 24.04 (Dragonfish)

• ZFS 풀 구성: STRIPE 풀로 FAST/cache dataset

• 네트워크: 10GbE (Intel X710), 클라이언트도 10G 구성 (iperf3 기준 9.5Gbps 이상 정상)

• 문제상황: 로컬 fio 테스트에서는 800MB/s 속도를 보이지만,
  
  하지만 같은 파일을 NFS 공유를 통해 클라이언트에서 fio로 테스트하면 300MB/s 수준으로 매우 느립니다. 
  
  

• 실 사용시에는 NAS에 있는 데이터셋을 10Gbe 내부망으로 읽어오기를 하려 하는데, 50MB/s 수준의 속도를 보입니다.

vers=4.1,nconnect=8,rsize=1048576,wsize=1048576,proto=tcp 이런 옵션을 사용중이고,

TrueNAS에서는 따로 셋팅한 것은 없습니다. 추가적으로 확인해 봐야할 설정은 바로 확인 가능 합니다.

• 위와 같은 설정에도 불구하고 NFS 속도가 300MB/s를 넘지 못하는 원인이 무엇일 수 있을까요?

• 혹시 추가로 점검하거나 최적화해야 할 설정이 있다면 조언 부탁드립니다.

쪽팔리면 질문하지 맙시다. 소중한 답변 댓글을 삭제하는건 부끄러운 일 입니다