[Computer Architecture] InfiniBand

InfiniBand

 

인피니밴드(InfiniBand)는 High-Performance Computing과 기업용 데이터 센터에서 사용되는 스위치 방식의 통신 연결 방식이다.  

 

주요 특징으로는 높은 Through-put과 낮은 Latency ,높은 안정성 & 확장성을 들 수 있음

 

Computing Node와 Storage Device와 같은 고성능 I/O 장비간의 연결에 사용됨

 

 -> processor 와 intelligent I/O Devices 간의 dataflow를 위한 구조

 

PCI를 대체하기위해 나옴

 

Capacity, Expandability, Flexibility 를 늘리기 위함

 -> Reliability, Availability, Serviceability for Internet infrastructures

 

Remote storage, networking and connection between servers

 - Attach servers, remote storage, network devices to central fabric of switches and links

 - Both for PCB and "out of box" interconnect

 

Greater server density(removing I/O from the server chassis)  

 - Blade server  

 

I/O distance from server up to(전송매체에 따라 상이함) 

 - 17m using copper, 300m multimode fibre optic, 10km single mode fibre 

 

Up to 120 Gbps signalling rate (2.5*12*4)

 - Data rate 2.5 G * 0.8(data 8B / 10B encoding) * 4(QDR) = 96Gb/sec (신호특성을 바꿔 에러줄임)

 - Implementers can aggregate links in units of 4 or 12, called 4X or 12X

 - A 12X QDR link therefore carries 120 Gbit/s raw, or 96 Gbit/s of useful data

 - As of 2009 most systems use a 4X aggregate, implying a 10Gbit/s(SDR), 20Gbit/s(DDR) or 40Gbit/s(QDR) connection

 - Larger systems with 12X links are typically used bfor cluster and supercomputer interconnects and for inter-switch connections

 

The end-toend latency range

 - MPI latency : 1.07 - 1.29 microseconds MPI latency

 - Provides RDMA(Remote node R/W via DMA) capabilities for low CPU overhead 

 

InfiniBand Fabric: 연결이 여러가지 형태로 되어있음 => fail-over scalability 

 

 

 

참고:  

 1) http://www.eetimes.com/document.asp?doc_id=1204375

Crafting Native Software Stacks for InfiniBand Designs | EE Times

www.eetimes.com

본문으로 이동