현재 구성은
Proxmox VE 3대
prompts 웹서버
prompts sd api 서버
총 5대 였습니다.
이중 첫번째 Proxmox 에서 TrueNAS-Scale 를 32G ssd 두개, 500G nvme 두개, 8테라 하드 6개를 패스스루로 물려서 사용중이었는데...
Proxmox 3대를 클러스터로 구성하며 HA 셋팅을 해보니
첫번째 놈이 죽으면 (첫번째 놈이 스토리지 풀을 담당) 나머지 애들이 무용지물 이네요...
해서 어제 급하게 라이젠 세잔 5600G 하나 하고 램 64기가 그리고... 티피링크 8포트 짜리 10G 스위치
인텔칩 쓴 랜카드 두개를 부랴부랴 주문하고 컴퓨존 가서 찾아 와서 조립했는데...
이게 죽어도 -_-; 10G 속도가 안나와요
3G 가 최대 입니다.
하루종일 테스트해보고 다이렉트로 물려보고
별 삽질을 다해도 안대길래 뭐가 문제일까 찾기위해 처음부터 차근 차근
메인보드 메뉴얼 부터 읽어보니 -_-;
이런 문구가 있네요
16x 슬롯 두개 4x 슬롯 2개 있는데 만약 첫번째 슬롯이 아닌 다른 슬롯에 x4 장비가 연결되면 두번째 16x 슬롯은 4x 로
동작한다는 겁니다 -_-;
혹시라도 첫번째 슬롯에 cpu 꽂을일 있을까 해서 비워둔게 화근이네요 -_-;
트루나스는 gpu 꽂을일이 없길래 망정이지 -_-;
암튼 첫번째 pcie 슬롯에 꽂아주고나니
root@pve:~# iperf3 -c 192.168.10.110
Connecting to host 192.168.10.110, port 5201
[ 5] local 192.168.10.100 port 34032 connected to 192.168.10.110 port 5201
[ ID] Interval Transfer Bitrate Retr Cwnd
[ 5] 0.00-1.00 sec 1.10 GBytes 9.41 Gbits/sec 141 1.38 MBytes
[ 5] 1.00-2.00 sec 1.09 GBytes 9.41 Gbits/sec 0 1.38 MBytes
[ 5] 2.00-3.00 sec 1.09 GBytes 9.34 Gbits/sec 7 1.17 MBytes
[ 5] 3.00-4.00 sec 1.09 GBytes 9.40 Gbits/sec 0 1.38 MBytes
[ 5] 4.00-5.00 sec 1.09 GBytes 9.41 Gbits/sec 0 1.38 MBytes
[ 5] 5.00-6.00 sec 1.10 GBytes 9.42 Gbits/sec 3 1.39 MBytes
[ 5] 6.00-7.00 sec 1.10 GBytes 9.42 Gbits/sec 0 1.39 MBytes
[ 5] 7.00-8.00 sec 1.09 GBytes 9.37 Gbits/sec 0 1.39 MBytes
[ 5] 8.00-9.00 sec 1.09 GBytes 9.41 Gbits/sec 0 1.43 MBytes
[ 5] 9.00-10.00 sec 1.10 GBytes 9.42 Gbits/sec 0 1.45 MBytes
- - - - - - - - - - - - - - - - - - - - - - - - -
[ ID] Interval Transfer Bitrate Retr
[ 5] 0.00-10.00 sec 10.9 GBytes 9.40 Gbits/sec 151 sender
[ 5] 0.00-10.00 sec 10.9 GBytes 9.40 Gbits/sec receiver
드디어 안식을 찾았습니다.