PCI Express總線技術白皮書
PCIExpress總線技術的演進過程,實際上是計算系統IO接口速率演進的過程。PCI總線是一種33MHz@ 32bit或者66MHz@64bit的并行總線,總線帶寬為133MB/s到最大533MB/s,連接在PCI總線上的所設備共享133MB/s~533MB/s帶寬。這種總線用來應付聲卡、10/100M網卡以及USB1.1等網絡接口基本不成問題。隨著計算機和通信技術的進一步發展,新一代的IO接口大量涌現,比如千兆(GE)、萬兆(10GE)的以太網技術、4G/8G的FC技術,使得PCI總線的帶寬已經無力應付計算系統內部大量高帶寬并行讀寫的要求,PCI總線也成為系統性能提升的瓶頸,于是就出現了PCIExpress總線。PCIExpress總線技術在當今新一代的存儲系統已經普遍的應用。PCIExpress總線能夠提供極高的帶寬,來滿足系統的需求。如下表所示:

表1PCIExpress對比
目前,PCI-E3.0規范也已經確定,其編碼數據速率,比同等情況下的PCI-E2.0規范提高了一倍,X32端口的雙向速率高達320Gbps。
1.2PCIExpress總線的技術優勢
PCI總線的最大優點是總線結構簡單、成本低、設計簡單,但是缺點也比較明顯:
1)并行總線無法連接太多設備,總線擴展性比較差,線間干擾將導致系統無法正常工作;
2)當連接多個設備時,總線有效帶寬將大幅降低,傳輸速率變慢;
3)為了降低成本和盡可能減少相互間的干擾,需要減少總線帶寬,或者地址總線和數據總線采用復用方式設計,這樣降低了帶寬利用率。PCIExpress總線是為將來的計算機和通訊平臺定義的一種高性能,通用IO互連總線。
與PCI總線相比,PCIExpress總線主要有下面的技術優勢:
1)是串行總線,進行點對點傳輸,每個傳輸通道獨享帶寬。
2)PCIExpress總線支持雙向傳輸模式和數據分通道傳輸模式。其中數據分通道傳輸模式即PCIExpress總線的x1、x2、x4、x8、x12、x16和x32多通道連接,x1單向傳輸帶寬即可達到250MB/s,雙向傳輸帶寬更能夠達到500MB/s,這個已經不是普通PCI總線所能夠相比的了。具體配置可以參照表1。
3)PCIExpress總線充分利用先進的點到點互連、基于交換的技術、基于包的協議來實現新的總線性能和特征。電源管理、服務質量(QoS)、熱插拔支持、數據完整性、錯誤處理機制等也是PCIExpress總線所支持的高級特征。
4)與PCI總線良好的繼承性,可以保持軟件的繼承和可靠性。PCIExpress總線關鍵的PCI特征,比如應用模型、存儲結構、軟件接口等與傳統PCI總線保持一致,但是并行的PCI總線被一種具有高度擴展性的、完全串行的總線所替代。
5)PCIExpress總線充分利用先進的點到點互連,降低了系統硬件平臺設計的復雜
性和難度,從而大大降低了系統的開發制造設計成本,極大地提高系統的性價比和健壯性。從下面表格可以看出,系統總線帶寬提高同時,減少了硬件PIN的數量,硬件的成本直接下降。
1.3PCIExpress總線在萬兆存儲系統的應用
在H3C公司開發的最新一代存儲產品IX3000中,采用Intel最新一代服務器硬件平臺技術,前端支持高達16個GE接口,或者8個GE+8個4GbFC接口,最高配置更可以支持多達4個10GE接口,后端接口可以提供6個SAS×4寬端口,達到72Gbps的后端訪問速率,提供無與倫比的磁盤訪問IOPS和吞吐量,只有PCIExpress總線架構的系統才能滿足系統性能的需求。

IX3000存儲系統控制器系統架構如下圖所示。系統采用4條×8的PCIE總線來擴展前端和后端接口,采用2條×8PCIE總線來實現2個控制器之間的緩存鏡像,采用2條×8PCIE總線作為系統內部的控制和管理通道。其前端接口能夠安裝10GE接口卡或者GE+FCCOMBO接口卡,以及GE接口卡,后端PCIE接口用來和高性能的IO處理擴展卡連接,提供高性能IO處理、RAID計算以及CACHE鏡像管理等功能,并提供SAS后端接口用于連接SAS磁盤陣列,為用戶帶來前所未有的存儲新體驗。
評論