[Server] ߱ D1581 带 ̿ ߿ Ȩ 4 -

   
   ȸ 7580   õ 2    

이전 글

1편 : https://www.2cpu.co.kr/bbs/new_view.php?bo_table=freeboard_2011&wr_id=1463301&qstr=

2편 : https://www.2cpu.co.kr/bbs/new_view.php?bo_table=freeboard_2011&wr_id=1467652&qstr=

3편 : https://www.2cpu.co.kr/bbs/new_view.php?bo_table=freeboard_2011&wr_id=1470157&qstr=

4편 : https://www.2cpu.co.kr/bbs/new_view.php?bo_table=freeboard_2011&wr_id=1470242&qstr=

5편 : https://www.2cpu.co.kr/bbs/new_view.php?bo_table=hardware_2014&wr_id=45349&qstr=

6편 : https://www.2cpu.co.kr/bbs/new_view.php?bo_table=hardware_2014&wr_id=45350&qstr=

7편 : https://www.2cpu.co.kr/bbs/new_view.php?bo_table=hardware_2014&wr_id=45355&qstr=

8편 : https://www.2cpu.co.kr/hardware_2014/45359


보드는 테스트 해본 결과 

중국산 보드 특유의 usb 3.0 프리징 문제도 전혀 없었고 슬립모드도 잘 작동합니다.

내장 sata 컨트롤러가 CPU 직결이라 그런지 성능이 아주 뛰어납니다.

칩셋 DMI레인에 대역폭이 구속되지 않습니다.

전체적인 퀄리티는 상당히 훌륭한 편이며 셀러가 무상보증 5년을 자신 있게 주장하는데 납득이 갈만합니다. 근데 과연 해줄지가 의문이긴 합니다..

올코어 터보 속도가 2.4ghz 풀로 돌아갑니다. 다만 전력이 딸리는지 몇번 돌리면 x23 배수 2.3Ghz로 떨어지네요.

이전에 바이오스 설정이 아주 상세하다고 했는데 그냥 막 만든 것 같진 않고 세세한 옵션들이 모두 적용되는 것 같습니다.

pcie bifurcation 설정도 보드 포트 구성대로 제대로 나와 있습니다.

특이한 점은 바이오스에 리얼텍 랜 비활성화 옵션이 아무리 찾아도 없습니다.

그리고 인텔 랜 PXE롬이 바이오스에 내장되어 있습니다. 

쿨러 속도 옵션이 4pin 2개 모두 정상작동 합니다. 중국산 보드 중에 이게 잘 작동하는게 화난지 빼고는 드뭅니다. 저는 메뉴얼모드로 37.5% 고정으로 두었는데 조용하고 좋네요.

처음 전원을 켰을때 7세그먼트가 100프로가 될 때까지 모든 쿨러가 100프로 풀스피드로 도는데 마치 밴더 서버처럼 작동하는 느낌이 듭니다.

단점은 온도 모니터링이 제대로 안 됩니다. esxi에서는 당연한거고 윈도우에서도 cpu 온도만 제대로 나오는 것 같습니다.


성능은 저번 2편 https://www.2cpu.co.kr/bbs/new_view.php?bo_table=freeboard_2011&wr_id=1467652&qstr= 에서 다루었다시피





에.. 뭐 남아돌져 그냥

온도: 59인데 방 온도가 10도 수준이라(추위 전혀 안탐) 여름에 제대로 측정해봐야 합니다. 

소비전력: 풀로드시: 60w 아이들시: 13w (cpu만)

다른 장치들 전혀 안 끼고 깡통 보드만 가지고 측정한 결과 입니다.

소비전력계가 없어서 정확히는 모르겠습니다.



esxi 7 설치 후 일주일 정도 굴려본 결과


아직 기존에 굴러가고 있는 서버들을 이전하진 않았습니다.

아직 zfs COW용 zil이 없어서 비동기 상태라 이것저것 올려서 테스트만 해봤습니다.

상당히 조용해서 만족스럽습니다. 역시 이것이 녹투아의 위력..

문제는 오히려 하드가 더 시끄럽습니다.

WD 블랙 하드가 속도가 빨라서 만족스럽긴 한데 소음이 생각보다 크네요.. 공진음은 고무링 써서 그렇다고 해도

특유의 틱틱하는 긁는 소리가 상당히 거슬립니다. 가끔씩 끼이잉 하는 소리가 들리는데 찾아보니까 하드 이상은 아니고 WD 블랙 특성인 것 같습니다.

발열은 CPU 자체가 저전력 설계라 그런지 그리 뜨겁진 않은 것 같습니다.

다만 CPU 쿨러가 플라워형 쿨러라 그런지 뒤로 열을 발산해야 하는데 그렇지 못한 것 같습니다. 

그렇다고 2U 블로워형 쿨러로 바꾸기엔 시끄러운 건 질색이라(..)

지금은 온도가 높지 않아서 괜찮은데 여름에 더워지면 백패널을 빼서 열을 빼내야 할 것 같습니다.


esxi는 ipmi가 있어야 온도 모니터링이 되는데 업그레이드 된 버전은 aspeed 2400 BMC 칩이 있으니 온도 모니터링도 가능할 것 같습니다.

(업그레이드 된 버전을 사야하는 이유 +1)


esxi 7 설치 후 sata 컨트롤러 패스스루해서 omnios에 napp-it으로 zfs 스토리지 풀 만들었습니다.

다만 처음에 esxi 설치 후 패스스루 디바이스 목록에 sata 컨트롤러가 안 보여서 당황했는데

찾아보니 제온 D 시리즈가 sata 컨트롤러가 CPU 직결이라 생기는 문제더군요.

칩셋 사우스브리지에 sata가 연결되는 일반적인 보드들은 위의 문제가 없습니다.

https://www.kaperschip.nl/2016/08/ahci-controller-passthrough-with.html?m=1

암튼 이 링크 대로 vi로 장치 추가해주고 reboot하니 잘 뜹니다.

어째서 인지 AMD sata 컨트롤러가 있습니다. 


아무튼 수정해준 뒤 리부팅하면 잘 뜹니다.


omnios 설치하고

램 64기가 중에 무려 48기가를 여기에다 할당했습니다.

스토리지 풀은 레이드 10으로 묶었습니다. 속도는 sync=disabled에서는 당연히 램이 많아서

nfs로 데스크탑에 마운트 했을 때 read 1000mb/s write 1000mb/s로 10g 대역폭 최대로 나오는데 큰 의미는 없고

sync=enabled 에서는 zil이 없어서 속도가 너무 처참해서 sync=disabled 상태에서 램 캐쉬 넘는 대용량 파일로 테스트 시 

예상대로  read 1000mb/s write 300mb/s로 잘 나와줬습니다.

zil slog용으로 옵테인을 쓰려고 했는데 옵테인 가격이 진짜 비싸도 비싸도 너무 비싸네요..

마음 같아서는 옵테인 900P 낑가주고 싶지만.. 100기가에 10만원도 넘는 가격에 허걱해서

그냥 옵테인 32Gb짜리로 끼워줄 생각입니다. 근데 이것도 매물이 별로 없네요..

옵테인 32Gb짜리가 쓰기 290mb/s는 나와주니 사실 제일 적절한 놈이긴 합니다.

lz4 압축해서 500mb/s 정도 뽑아주면 좋겠네요 ㅎㅎ 코어가 많으니 가능할 것 같습니다.


아무튼 일주일 정도 쓰고 내린 결론은

중국산 보드지만 생각보다 준수한 퀄리티 

홈서버 올인원 esxi 서버로 추천

깡통 버전은 비추



끝.


ª ϼ ϰ.
2021-11
dz ۼ ̽ϴ~~

а ϴ~~
     
2021-11
մϴ
µ ̷ ̷ٰ Ƽ ۼϳ׿ ^^
ocarina 2021-11
̷Ӱ ýϴ. õ
     
2021-11
մϴ ^^
Ѹ 2021-11
ýϴ.
۷, 4U ̽, ESXi ε κ ϳ׿. ^^
     
2021-11
. ƹ ߿, , ⼼, ϴ.
ְߵ 2021-11
оϴ. ͽϴ^^
     
2021-11
ϱ Դϴ..
dateno1 2021-11
xHCI ũ ӽ÷ ų, NIC ״ , Ÿ յ غ̳׿

ȣȯ ̱ ⵵ϱ ȴٸ ũ Ʈѷ ( Ʈص Ͽ ɼ ſ Ƽ ϵ ֱâ )

ɼǷ Ƹ ̾ƿ ̿ 츮°Ŷ ׷ɵմϴ

9900̶ ̸ , ̱ ƽ׿ (߿ 10 ſ ԽƮ ÷ ü )

64Ⱑۿ ټ ھ ŭ ԽƮ ø⵵ ̴ ׷ Ը ھ Ŭ մϴ

AMD SATA ִ° ڿ ġ Ѱ ƴϰ, Ѷ AMD μ ⶧ ִ°ɷ dz׿

ũ ɽ , HDD ɽ ׷ ѳ SATA SSD ؾ NVMeᵵ ϴ ( Ἥ üɷ ÷ )
     
2021-11
̱ ѵ ñؼ ׽Ʈ غýϴ.
̿ c state ⺻ disabled .

ũ Ʈѷ ⿣ ׷ D ø Ư
e5 ؼ κ ǰ Ĩ и Ǿְ Ĩ¿ sata DZ
ZFS 丮 sata Ʈѷ մϴ. Ĩ¿ bus DZ nic, ī bus ؼ sata Ʈѷ Ÿ ʰ 뿪 ־ δ ʽϴ. ׷ غ sas Ʈѷ Ĩ̶ ̰  𸣰ڳ׿.. Ĩ ̶ .. IPMI ñѵ ϳ ..
ȣȯ os HBA нϱ ϴ. Esxi ϵ ȣȯ ϳ׿..

尡 64Ⱑ ִ 2CPU ſ ߳ ʰ Ǯ äϴ
Ը Ůϴ. ο ֱ⿣ ڸ . Ŭ̾ ¼Ҹ ..

ZFS 丮 ZIL Slog ij 뵵 ƴ϶ COW ̱ Ÿ ߿մϴ.
ܼ а ӵ Nvme ִ´ٰ ʽϴ. Nvme ijø ̿ϱ ս ־ synchronous write ƽϴ. Ÿ ش ZIL ⾲⿡ ȿԴϴ.
Esxi NFS sync=always 䱸ϱ 丮 ø ʼԴϴ.
          
dateno1 2021-11
Īϴ Ÿ ص HDD Ű ƴ϶ մϴ ( ź̰ HDD ӵ ϸ )

÷ Ű 𸣁, ӵ RAID 콬 ġԴϴ

ESXi 7 鼭 ⵵ , ׷ ȸԴϴ

COW °Ŷ ׿....

װ ä VM OSũ PCIe ص SSD ֽϴ (HDD ȣƮ ϳ ּ ű ؼ ɽ ǰ װ ؼ ϴ½ ֽϴ)
               
2021-11
½ϴ.
Ȩδ sata Ʈѷε .
esxi 丮 иϷ ū ̼ Դϴ.
vsan ôµ 󱸿.
                    
dateno1 2021-11
HDD ȣƮ NAS OS ƴ OS ֽϴ

NFS/SMB ϸ Ǵٺ 𰡰 ʿ ϱ

ٸ Ҵؼ ɽ ְ سԴϴ ( HDD VMFS ũ °ͺ ̰ Ȼ ɴϴ)

ũ ص ٷ 뷮 ƿųؼ ũ 뷮 ҋ ȿ Ǵ 쵵 ֽϴ




߽ 1 : ¼ٺ ϻ ǹȳ׿
߽ 2 : ݵ ؼ EC2 VPN/Socks ߳׿ ( VPN  µ, ° ̶ )


Page 1/280
2014-05   4442882   1
2015-12   999033   ް
03-28   169   ȯ
03-28   288   ǻͽŽþ
03-27   270   ö
03-22   529  
03-20   779   2CPU
03-14   1256   2CPU
03-02   1953  
02-04   3927   ̼
01-29   3930   ̰
01-21   5423   ڹ
01-19   5218  
01-19   4836   9
01-16   4835   ѲǪ
01-06   4694   κ7
01-01   4609   2CPU
2023-12   3866   ڹ
2023-12   4294   ö
2023-12   3861   ѲǪ
2023-12   2981   ̰
2023-12   2607   ̸Ÿ2