드디어 완성이라고 생각하고 싶은 시스템입니다.

오래전부터 계속 계획하고 이래저래 빌드해왔던 시스템들 드디어 거의 완성이 되었다 싶어 소개글 올려봅니다. 아마 서버포럼에서 여러가지 의미로 가장 더러운(...) 시스템 자랑이 아닐까 싶습니다. 가정집이 아니고 아버지 사무실에 있다보니 먼지가 참 많습니다. 때문에 가끔씩 가서 재부팅할겸 먼지도 털어주곤하는데 이번에는 빌드하는데 집중해서 먼지를 못털어서 부끄러운 시스템입니다.

먼저 전체적인 시스템 모습입니다.

먼지 때문에 혐이라고 붙여야하나 고민했는데 그냥 안붙였습니다. 어쩌겠어요..

(현재 사진을 찍어놓은게 없어 예전 사진으로 대체)

부속품 1. AVR

위에는 그렇다치고 밑에는 어떤 놈이냐 하실텐데 적혀있듯이 AVR이라는 놈으로 갑작스럽게 전압이 220V에서 떨어질 때 전압을 220V로 승압해주는 역할을 담당하고있다고 생각하시면 됩니다. 가끔 사무실에 들어오는 전기의 전압이 불안정할 때가 있는데 뒤에서 설명드릴 UPS가 승압기능까지 있다고 들어서 그거로 구입했는데.. 그걸 못버틸 정도의 낮은 전압(190V)이 가끔 들어오는 바람에 죽어버린 전적이 있어서 구입하게 되었습니다. 그래서 제작년인가 구입해서 지금까지 잘 사용하고 있습니다. ㅎㅎ 전압이 불안정할 때 TV가 자주 꺼져서 고장날까 싶어 이녀석에 물렸는데 효과 아주 좋아서 만족하고 있습니다.

부속품 2. APC SUA-1500

(아마도 구형) APC의 SUA-1500입니다. 마침 링크를 보니 너무 구형이라 그런지 서비스 종료 임박 알림이 떠있네요; 그래서 그때 당시에 저렴한게 얘 밖에 없어서 그냥 구입했는데 이래저래 잘 사용하고 있습니다. 다만 위에서 설명드렸다시피 190V의 아주 낮은 전력으로 순간적으로 내려갔다 올라가는 현상이 가끔 있다보니 한번 죽어버려서 교체받았습니다. 지금은 AVR이 있어서 그런지 한번도 고장난 적 없이 잘 운용중입니다. 다만, 배터리가 뭔지 몰라서 나중에 날 잡아서 확인해봐야할 것 같습니다.

(현재 사진을 찍어놓은게 없어 예전 사진으로 대체)

부속품 3. NETGEAR GS724T v3

오래전에 구입할 당시 원래는 v4를 구입하려고 했는데 매물이 없어서 v3로 구입했습니다. 24포트에 매니지먼트 기능이 있어서 Link Aggregation과 같은 고급 기능을 사용할 수 있다는게 큰 장점인 것 같습니다. 거기에 뽑기를 잘한건지 팬이 있어서(아마도) 온도 관련해서 크게 신경 안써도 되어서 좋긴 합니다. 어짜피 고급 기능은 안쓰는데 포트가 많은데도 저렴하게 구입할 수 있어서 만족하는 제품입니다. SFP 포트가 있어서 1번에 굳이 1G 포트를 안끼워도 되긴하는데 MCX354A는 QSFP 규격이라 변환 포트가 필요한데 어짜피 속도를 필요로 하는 제품들은 전부 40G로 물려있어서 신경 안쓰고 있습니다. 나중에 기회가 된다면 해주고 싶긴 하네요.

1. Proxmox용 서버(OPNsense 설치됨)

CPU: Xeon E5-2650 v4 2.20GHz x2

Mem: Samsung DDR4 ECC/REG 8GB x8(64GB)

Board: Supermicro X10DRi

GPU: Nvidia Tesla P4 D5 8GB

NIC: Mellanox ConnectX-3 FCBT 40G 2port x3

GPU가 냉각이 잘 안되는 것 같아서 에라모르겠다 느낌으로 팬을 냅다 꼽아버린 라우터용 서버입니다. Proxmox에 OPNsense VM을 올려서 사용중입니다. 원래 네이티브 OPNsense용 시스템이 따로 있었는데 성능이 아쉬워서 이렇게 만들어줬습니다. OPNsense에 12코어 16기가 달아주니 그냥 날아다닙니다. 과한 것 같긴한데 뭐 어때요. 나중에 조정하고 지금은 이대로 놔두려고 합니다. 아직까진 OPNsense만 VM으로 되어있는데 조금씩 GPU 할당한 VM도 만들어주려고 합니다. 데이터센터용이라서 VM에도 패스스루가 아닌 방식으로도 잘 사용할 수 있지 않을까 기대됩니다.

TMI) 저 팬이 기존에 가지고 있던 다른 랙에서 떼온거라서 굉장한 RPM으로 돌아가는데 세번이나 저기에 손이 닿아서 손 상태가 참 메롱합니다..

2. 시놀로지 DS1821+

CPU: AMD Ryzen V1500B 2.2GHz

RAM: Samsung DDR4 Sodimm ECC/Unbuffered 16GBx2(32GB)

저장장치: WD HC550 16TB x4(RAID5) / WD Elements 10TB x2(RAID 1) / SKHynix Gold SSD S31 1TB / Seagate Firecuda 520 2TB x2(각개 볼륨 지정 사용)

NIC: Mellanox ConnectX-3 FCBT 40G 2port

이전부터 계속 꾸준하게 언급되고 있는 시놀로지 정품 DS1821+입니다. 아래의 라우터 VM과 연결되어있습니다. 계속 언급을 했기 때문에 딱히 추가 설명을 해드릴 만한게 없네요. 아래 링크에서 추가적인 tmi를 확인하실 수 있습니다.

https://svrforum.com/hardware/234290

https://svrforum.com/hardware/738100

tmi) 40G를 사용하는데 무슨 일인지 지금 40G가 정상적으로 안되고 대충 8G로 반의 반토막이 나는 바람에 OPNsense 재부팅해보는 중인데 어짜피 PCIE 3.0 x4 때문에 최대속도 18G 밖에 안나오는걸 이미 확인했습니다. 어짜피 1G 이상의 속도만 나면 되는거라 큰 불만은 없긴 합니다만.. 재부팅해도 똑같네요. 쩝..

3. 라즈베리파이 4 8GB

Board: 라즈베리파이 4

RAM: 8GB

저장장치: 킹스톤 QLC NVME 512GB

여기에 뭐라도 올려서 사용하긴 해야하는데 지금 서버들의 스펙들이 다 좋은데다 다 쓰지도 못하고 있어서(성능이 필요한 ARM이라면 M1 맥도 있고 오라클 A1 서버도 두 대 있는 상황) 그냥 놀고만 있습니다. 사진을 잘 보니 SSD의 LED가 꺼져있는걸 보니 너무 오래 켜져있어서 그런건가 SSD의 문제인건가 죽었나보네요. 어쩐지 SSH 접속이 안되서 재부팅시키니까 뭔가 켜진 것 같은 느낌이었는데 헣..

4. GPU 개발 서버

CPU: Xeon E5-2650 v4 2.20GHz x2

Mem: Samsung DDR4 ECC/REG 8GB x8(64GB)

Board: Supermicro X10DRi

GPU1: Nvidia RTX A4000 D6 16GB

GPU2: Nvidia RTX 3090 D6X 24GB

NIC: Mellanox ConnectX-3 FCBT 40G 2port

이거도 이래저래 소개를 했는데 전과 조금 달라진건 랙 서버에 있는 팬을 떼어서 히트싱크에 냅다 (허접하게)붙여놨습니다. 안떨어지길 바래야죠. 온도 자체는 적절하게 잘 잡히는 것 같습니다. 현재 A4000에는 Ai그림 서비스가 두개가 돌아가고 있고 RTX 3090은 아직까진 돌아가는건 없습니다. 이래저래 실험적으로 돌리고 있거든요. 나중에 알리에서 라이저 케이블 구입해서 GPU는 위로 올리고 아래에는 PCIE SSD같은걸 추가로 연결하거나 현재 가지고 있는 GPU를 더 장착하던가 하려고 합니다. 메인보드가 PCIE 슬롯이 6개라서 부담없이 막 설치가 되서 좋긴 합니다.

tmi)

7z 벤치마크 도중 htop 상태입니다. 올코어 100% 찍는게 가슴이 웅장해집니다.

결과는 이래요.

이거말고도 이전에 사용하던 HP 서버가 있는데 그건 설치해야하나 고민되는데 아마 설치 안하지 않을까 싶습니다. 아무래도 전력을 서버에서 많이 쓰게 되는것도 안좋을 것 같아서.. 알리에서 SAS 케이블도 구입해야하는데 텅장이네요...

아마 이게 빌드의 끝일 것 같습니다. 소소하게 추가될 것 같긴한데 이 틀에서 크게 바뀌는건 없을 것 같습니다.

저의 더러운(?) 시스템 보시느라 고생하셨습니다.