안철현 08-07

SAS Expander / 백플레인 을 이용해서 확장 가능합니다.
네트워크에서 스위치-스위치 연결하는 것 처럼

제온프로 08-07

위에 처럼도 가능하지만..

위 같은 카드로 구성된 여러대의 스토리지를
하나의 스토리지로도 묶어지는 겁니다.

또한 이 말은
한대의 스토리지를 여러대의 스토리지로 확장가능한데.
이걸 한대로 묶을 수도 있는거죠..

쉽게 말해 이 카드로  Enterprise Storage로 구성할 수 있다, 만들수 있다..는 뜻입니다.

레인보우7 08-07

무심히 흘려본 스펙인데 좀 sas를 찾아보았습니다.

SAS를 좀더 살펴보시면
SAS 논리적 주소 공간, SAS 프로토콜은 최대 16,384개의 디바이스를 주소 지정할 수 있는 이론상 구조입니다.

레이드 카드 모델중에 i(internal): 내장 포트(커넥터)를 의미, 서버 내부 스토리지 연결용은 물리적인 확장에 한계가 있어서
실제적으로 브레이크아웃케이블 사용시 8개 사용이 제일 문안하고
e가 붙은 모델은 SFF-8644 커넥터로 외부로 빼서 sas용 jbod(내안에 익스펜더 칩있다!)로
데이지체인 연결하면 128개까지 늘리는건 어렵지 않습니다.

카드의 스펙 제원에 따라서 128은 브컴 해당 모델의 성능이슈 없이 내부적으로 제한을 건 개수이고
요즘 나오는 신형 카드는 240개까지 달라붙을 수 있습니다.

- 직결 연결시 :  SFF-8643(내부용) 커넥터 1개 → 4개의 PHY → 각각 1개 디스크 = 최대 4개 디스크 연결 가능 (브레이크아웃(분기형) 케이블 사용 시)
  일반적으로 1개 커넥터에 4개로 케이블 갈라치기 해서 2개 커넥터로 해서 8개를 SAS/SATA 연결을 해서 많이 사용하는 방식입니다.

- Expander(백플레인) 사용시 :  1개의 PHY 또는 4개의 PHY를 Expander에 연결 → Expander가 다수 디스크로 확장 가능 (일반적으로 24~36개 디스크)   

- 8개 PHY 구성(9361-8i 기준) :  전체 8개 PHY (커넥터 2개 × 4PHY) → Expander 조합 시 8 x 16 = 최대 128개 디스크까지 구성 가능
  (브컴 카드 모델 스펙기준- 성능반영해서 16개로 조정한듯)

- 최신 컨트롤러:  최신 모델은 내부 CPU/메모리, 펌웨어 스펙 향상으로 240개 디바이스 지원

브컴 레이드 컨트롤러: e포트/ i포트  (두개를 혼용시킨 모델도 있음)
"e" (external): 외장 포트를 의미, 주로 JBOD(외장 디스크 인클로저) 연결용
"i" (internal): 내장 포트를 의미, 서버 내부 스토리지 연결용

SAS Expander 사용 시 성능 이슈가 생길 수 있는 원인
- 대역폭 병목 (Bottleneck)
- Expander 내부 처리 한계
- 다단 연결 (Daisy-Chain)

너무 많이 외장으로 붙이면 성능이슈뿐만아니라 전원장애사태 발생후 올라올때 머리+몸통따로 노는 비상상태가 가끔씩 생기긴합니다.

박문형 08-07

카드 자체만으로는 그렇게 확장이 안됩니다..

중간에 SAS expander 가 있어야 합니다..

그만큼 디바이스를 인식할 수 있다 정도로 보시면 됩니다..

실제 그만큼 하드를 연결하실 일이 있나요??

장동건2014 10:27

그 익스펜더라는 게 일종의 포트멀티플라이어 같은 것인가요?
물론 대역폭 같은 것은 포트멀티플라이어와는 다르게 충분히 확보하겠지만...

레인보우7 10:39

SAS 익스펜더칩은 양대산맥이 있는데 마세(마이크로세미)랑 브컴이 주류입니다.

마세
https://ww1.microchip.com/downloads/aemDocuments/documents/DCS/ProductDocuments/Brochures/SXP-24G-Family-Sell-Sheet-00003338.pdf

브컴
https://www.broadcom.com/products/storage/sas-expanders

안철현 11:19

SAS 12G 포트 1~2개를 Expander와 연결하면
Expander에 따라서 12개 ~ 24개 정도로 확장시켜 주는 일종의 포트 확장 장치 입니다.

SAS 어뎁터 ---- 연결케이블 ---- 익스팬더 ---- SAS 디스크
            ㄴ ---- 연결케이블 ---- 익스팬더 - 연결케이블--- 익스팬더 ---- SAS 디스크

이런식으로 확장 가능합니다.
다만. 많이 달면 달수록 SAS 어뎁터의 대역폭 제한이 있으니...
디스크 개수는 늘어나지만, 동시에 전송할 수 있는 대역폭 측면에서 병목이 발생합니다.

박문형 12:52

SAS 익스펜더와 포트멀티플라이어는 다른 것이지만 하는 역활은 비슷합니다..

네트웍으로 말하면 스위치 허브 같은 것 입니다..

SAS 익스펜더는 SAS 3,6,12G 제품이 있고 확장 능력에 따라 칩셋하나당 디스크 연결 최대 24CH까지 확장이 되며

레이드 카드, SAS 확장카드, JBOD BOX 형태로 완성품이 존재하며 디스크는 SAS HDD와 SATA HDD 둘 다 사용이 가능하지만 보통은 어느 한쪽만 몰아 사용합니다..

SAS 익스펜더를 이용한 제품중에 HA를 구현한 제품도 있습니다..

디스크 갯수(ID넘버)는 SAS 콘트롤러가 얼마나 지원하느냐 SAS 익스펜더를 얼마나 확장 가능하냐에 따라 결정되며 보통 디스크 100개 정도가

최대 크기 입니다..


SAS 익스펜더를 사용하는 이유는 디스크를 직결하는 것보다 보통 성능은 떨어지지만 직결보다 덜 복잡하고 전체비용이 직결하는 것보다는 쌉니다..

장동건2014 14:40

감사합니다.
아무래도 직결보다야 좀 대역폭에서 손해를 보겠지만 포트멀티플라이어같이 대책없이 만들지는 않겠지요.
제가 하도 당해봐서...

박문형 13:43

https://www.2cpu.co.kr/hardware_2014/36546

https://www.2cpu.co.kr/hardware_2014/36560

좀 오래된 것이지만 아답텍 레이드 카드에 SAS EXPANER 백플레인 2장(앞 24베이 , 뒤 12베이)이 들어간 슈마 36베이 조립기입니다..

이것을 이해하면 대략 어떻게 많은 하드디스크가 SAS RAID 카드와 연결되는지 알 수 있습니다..

그 외 슈마 스토리지 샤시들의 메뉴얼 보면 물리적으로 어떻게 연결하는지 어떻게 확장하는지에 대해서도 잘 나와 있습니다..

장동건2014 14:42

멋지네요.
저야 특별히 이런 물건이 필요가 없지만 공간만 된다면 한 대 들여서 디스크 채워가면서 갖고 놀고 싶어지네요.
저런건 디스크 채우는 재미가..