基于ＳＣＳＩ总线的高速数据存储系统软件设计

摘 要：设计一种基于CI总线技术的高速数据存储系统。系统采用PC机作为数据存储的主控单元，用2块CI硬盘组成磁盘阵，并设计简易的文件系统，最大限度地发挥CI硬盘的速度优势。在实际应用中系统存储带宽能够稳定地工作在100 MB/s以上。使用API开发CI接口程序，减少开发周期。在实际测试中，系统工作正常，表明了系统设计原理是正确的。

关键词：CI；数据存储；API；磁盘阵

oftware Design ofigh peed Data torage ystem Based on CI Bus

ZAO ao1,YUAN Yuan2,LI Xiuyou1,GUAN Jian1

(1Department of Electronic Engineering,Naval Aeronautical Engineering Institute,Yantai,264001,China;

2he Armament Department of the econd Artillery Corps of PLA,Beijing,10008,China)[JZ)][J12/3]

Abstract：he design of high speed data storage system based on CI bus is discussedhis system takes full advantage of the CI disk,uses PC as the main control unit,uses two CI disks and designs a simple file systemAccording to practical measure,the bandwidth can exceed 100 MB/sFor the purpose of cutting design circle,using API to implement the CI interface programhe test result indicates that the system works normally and the principle of the design is correct 

Keywords：CI;data storage;API;disk array[J12/3]

在雷达系统中对高数据率、大批量的数据进行存储，具有非常大的应用价值。这样做，一方面由于雷达系统外场实验的成本较高，同时一些特定场景实验数据又具有不可重复性，能够及时保存珍贵的实验数据对于雷达系统调试与性能分析都有着十分重要的意义。另一方面，当系统的实时处理能力不足时，可以将数据存储下来以便进行非实时的处理。比如某星载AR在某系统参数下的成像处理，一段时间的数据率达到了26 MB/s［1］，在如此高的数据率下实时保存现场数据就显得尤为重要。本文设计一种基于CI技术的数据存储系统，并在实际工程中得到了很好的应用。

1 基于总线的数据存储技术简介

11 常用计算机系统总线介绍

计算机总线是计算机部件间传递信息的通道，总线技术在整个计算机系统中占有十分重要的位置。随着计算机技术的不断发展，各种标准的、非标准的总线技术层出不穷。最典型的传统总线是IA(Industrial tandard Architecture)总线，又称A总线。它是IBM公司1984年为推出PC/A机而建立的系统总线标准，它在80286至80486时代应用非常广泛。随着CPU与微机性能的不断发展，原有总线的数据传输率已经无法满足系统的需要。为解决该问题，Intel公司于1991年提出了外围器件互连(Peripheral Component Interconnect)总线，即 PCI总线［2］。由于其优越的性能，PCI总线标准一经推出就得到了计算机业界的普遍青睐，现已成为当前最流行的总线之一。目前，PCI总线的峰值数据传输率可到28 MB/s，很好地解决了计算机总线遇到的瓶颈问题［3］。CPCI(Compact PCI)总线是PCI总线的增强和扩展，在电气上完全与PCI兼容，具有抗振和利于散热等优点，更适合于工业测控的应用。本文所介绍的高速数据存储系统就是采用CPCI作为系统的基本总线。

12 数据存储总线的选择

目前高速、超高速A/D芯片已不再难以得到，各种处理器的处理速度也越来越快，如何实现数据采集速度与数据存储间带宽的匹配问题是当前数采系统发展的瓶颈之一。

CI（mall Computer ystems Interface）意为小型计算机系统接口。它已成为小型计算机I/O总线接口的标准［4］。CI技术从1979年推出至今，经过了CI-1，CI-2，CI-3，Ultra2 CI，Ultra3 CI，Ultra160 CI和Ultra320 CI等多个版本，其接口带宽从最初的4 MB/s发展到目前的320 MB/s。FC(Fiber Channel，光纤通道) 是一种高速度、高可靠、低延迟、高吞吐量的串行数据传输接口，它可广泛应用于高性能存储、大规模数据库、网络存储系统等领域。从实际应用的效果来看，光纤通道的带宽要比CI带宽高出许多，甚至数倍于CI技术［，6］。

尽管光纤通道的优势明显，但其高昂的成本限制它的应用范围。同时Ultra320 CI总线带宽达到了320 MB/s，这个带宽基本满足目前嵌入式数据采集存储设备的需要。出于对系统性能分析及性价比的考虑，本系统选择Ultra 320 CI作为系统存储的数据总线。

2 高速数据存储系统设计方案

21 概述

对于实时信号处理系统，为保证实时性，它要求系统必须具有处理大数据量的能力，这样就对于数据的实时存储提出了更高的要求。目前，解决高速的数据存储主要有这样几种方法：

(1) 利用FIFO缓存器缓存高速数据流，以达到和低速存储介质间的速度匹配的目的。但这种方法实现起来比较复杂，将大大增加系统的工作量；

(2) 采用IDE硬盘，利用多线程并行读写硬盘的方式来解决数据传输率的问题。目前虽然IDE接口硬盘的瞬时传输速率超过了133 MB/s，但其持续传输速率不超过1 MB/s，无法满足高速数据存储的要求。采用多线程读写硬盘，可以使CPU的性能得到充分发挥，有效地提高硬盘的读写速率。但这种方法势必会占用大量的CPU资源，在进行数据存储的同时无法进行其他操作［7］；

(3) 利用CI接口硬盘。目前，320 MB/s的CI硬盘在实际应用中可以达到60~70 MB/s的持续传输速率［8］，160 MB/s的CI硬盘性能略低，大约为0 MB/s。随着CI硬盘成本的不断降低，CI硬盘已成为高速、大容量数据存储的一种较好的选择。此外，廉价冗余磁盘阵列(RAID)也是提高数据存储速率的一种有效手段。它采用并行原理，将多台的磁盘驱动器组合成磁盘阵列，进行并发读/写操作，并以多个硬盘的数据传输速率来匹配系统带宽，同时提供容错功能。

22 系统方案设计

目前基于PC系统的高速数据存储方案主要有2种：

第一种是采用硬件解决的方案，即数据不经系统内存，由数据采集卡通过DMA方式，经由PCI总线直接存储到CI硬盘。这种方式没有利用系统内存，节省系统总线带宽，因而可应用于高速的数据存储系统。但这种方案设计实现起来比较复杂，时间和经济成本通常很高。图1是这种方案的结构图。

第二种方法是采用软件解决的方案。它采用标准PC结构，数据先经PCI总线进入到系统内存，再经PCI存储到CI硬盘，如图2所示。在这种方式下，数据流在存储过程中要2次占用PCI总线带宽，所以其数据存储速度不及第一种方式。这种结构下数据存储速率的瓶颈是从PC机内存到硬盘的这个过程。

本系统采取的是第二种设计方案，为了解决存储瓶颈，系统采用特殊的数据存储方式，跳过Windows文件系统，直接对CI硬盘进行读写。同时，通过合理的选择CI磁盘阵的磁盘数量，提高系统存储带宽，使CI磁盘的速度优势得到最大限度的发挥。

23 CI硬盘实际带宽测试

在许多存储系统中，随着数据量的增加，会导致系统带宽下降，发生数据丢失现象。为此，就要找出系统发生数据溢出的节点，保证在系统带宽与高速输入数据流间的匹配。针对这种情况，专门对基于Ultra 320 CI硬盘的存储系统进行了测试，测试中使用希捷公司146 GB和300 GB两种容量的硬盘。通过Windows系统连续向CI磁盘中写入数据，每次写入事件返回后立刻再次写入，直至磁盘写满为止。由主机分别取得写入前与写入后的系统时间，2次相减就是1次写入时间。通过测试结果发现，随着数据量的增大，2种硬盘的存储速度都成阶梯性下降，但146 GB硬盘速度曲线下降的速度几乎是300 GB硬盘的两倍，这主要是因为在磁道相同部位时，二者的转速一样，但是300GB的盘片数目正好是146 GB的2倍［9］，这说明对于高速大容量的存储系统300 GB硬盘是一个更好的选择。在文献［8］中提到320 MB/s的CI硬盘持续存储速率大约为60~70 MB/s，实际测试结果与文献基本相符，如图3所示。

随着硬盘数的增多，系统的存储带宽不断变宽。当CI适配器上挂2块300 GB的320 MB/s的CI硬盘时，系统最大带宽可以达到140 MB/s，大部分时间存储速度能维持在100 MB/s以上。4块硬盘时存储速度最快能达到210 MB/s，在200 GB以前存储速度能维持在200 MB/s以上。当存储硬盘增加到8块时，系统平均存储速度大幅度提升，最低仍能维持在18 MB/s以上。但是，随着硬盘数目的增多，系统对各个硬盘的同步性有所下降，导致各个硬盘等待写入时间不同，速度曲线出现了毛刺现象（见图4）。

本系统是某雷达数据采集系统的一部分，要求存储带宽不低于100 MB/s，同时数据记录时间不得小于一个小时。通过计算可以得到系统数据存储总量约为32 GB。通过前面的分析，发现在系统中使用2块300 GB的Ultra 320 CI硬盘完全可以满足要求。

3 系统的软件设计

撰写各种CI适配器的驱动程序是一项十分烦琐的工作［4］，本系统选择当前在PC平台上开发CI应用程序比较流行的方法-API(he Advanced CI Programming Interface)。它是由Adaptec公司开发的，已经成为了小型机和PC机上CI编程的一个标准。通过API函数能够方便地控制各种CI外围设备，执行各种CI的输入输出指令。图显示的是利用API驱动CI设备的原理图［10］。

为提高CI硬盘的存储速度，方便对存储数据进行管理，在本系统中设计了一个简易的文件系统，以便减少硬盘的寻道时间，同时利用API函数并行存入数据，消除了原有文件系统处理资料写入的额外负担。将每次存储的数据作为一个数据文件，指定硬盘的前100个扇区作为目录区，记录每次数据存储的基本信息。每次存储形成一个目录信息，保存在一个扇区中，其格式定义如图6所示。

4 系统运行结果

本系统是一种基于PC机的高速数据存储平台，使用2块希捷公司的3146707LC Ultra320 CI系列硬盘作为存储介质，CI接口卡选用Adaptec公司的7901CI控制卡。按照设计的文件结构，编程实现简易文件系统，实现数据在磁盘中的线性存储，提高了数据存储速率，同时便于对文件的后续管理。实际工作中每块磁盘的存储速度能够达到0 MB/s以上，用2块CI磁盘组成RAID0阵，可以达到100 MB/s以上的[LL]存储速率。图7是系统实际工作中的上位机界面截图，开发环境为C++ Builder60。图中显示系统实时存储状态，及每次存储所形成的文件信息。从图7中显示状态可以看出，存储过程中平均速率及瞬时速率均超过100 MB/s，达到了预期的系统带宽设计要求。

结 语

本系统充分利用PC机的软硬件资源，发挥CI总线的速度优势，实际测试结果表明、系统运行状态良好、各项工作指标正常、实现了预期的设计目标。系统通过PCI/CPCI总线与数据采集系统联合使用，可广泛应用于雷达、通信等多种领域，应用前景广阔。

参 考 文 献

［1］吴琼之高分辨力雷达实时信号处理技术［D］北京:北京理工大学,2004

［2］王玉良,戴志涛,杨紫珊微机原理与接口技术［M］北京:北京邮电大学出版社,2000

［3］苏广川,张笈高级计算机结构技术及其应用［M］北京:北京理工大学出版社,1998

［4］刘强,蒋智平,吴智铭CI协议的实现［J］微型电脑应用,2000,16(4):18-20

［］achs M W VarmaFibre Channel and Related tandards［J］Communication Magazine,IEEE,1996,34(8):40-0

［6］蔡皖东基于AN的高可用性网络存储解决方案［J］小型微型计算机系统,2001,22(3):284-287

［7］郄玉双高速实时无压缩数字视频记录及分析系统［D］北京:北京理工大学,2006

［8］eath J R,Yakutis P Jigh peed torage Area Networks Using a Fiber［J］Channel Arbitrated Loop Interconnect,Network,IEEE,2000,14(2):1-6

［9］http://wwwseagatecom

［10］宋爱军雷达高速数据采集和数据重放系统［D］西安:西安电子科技大学,2000

作者简介 赵 涛 男，1982年出生，满族，辽宁兴城人，硕士研究生。主要研究方向为高速数据采集与存储。