基于网格的仿真资源异构数据集成技术的研究与实现
|
摘要
随着分布交互仿真DIS和高层体系结构HLA的出现,计算机仿真从单一的仿真系统走向综合的、网络分布的仿真环境。各仿真系统在计算机设备及接口、数据库系统、网络操作系统、开发工具等方面产生了异构,给仿真数据的共享带来了困难。
而网格技术的出现为实现仿真异构数据集成的研究提供了一种创新性的理论与技术支持,它的出现将会改变分布仿真系统的设计和应用模式,为仿真资源用户对仿真数据进行信息获取、共享、访问、分析和处理等各种需求提供切实可行的解决思路和实施方案。
本文针对仿真异构数据集成的需求,研究和分析了数据网格中间件OGSA-DAI的内部架构和运行流程,提出了基于网格技术的仿真异构数据集成平台(简称FZJCXT平台)的体系结构。本文中结合XML技术、网格技术、数据库集成技术,重点阐述了FZJCXT平台的设计方案和实现方法。该系统通过标准化的网格接口为不同的数据节点提供服务,并通过XML格式进行数据转换和传输,消除不同系统的数据模式的异构性,将多个独立的仿真业务系统集成到网格环境中,提供了系统数据源的注册发布、数据查询以及数据抽取功能,实现了各个独立的、分布的系统之间的数据访问。本文最后针对具体仿真应用对集成平台进行了测试,给出了演示结果,进一步验证了本系统的可扩展性、松耦合性以及节点自治性。
With the appearance of DIS and HLA, computer simulation grows from single simulation systems to synthetically and network distributed simulation environment. Almost all simulation systems bring heterogeneity in computer hardware and interface,DBMS,network OS,development tools etc,makes the difficulties in resource sharing of all interactive simulation systems.
The integrate of simulation resource based on Grid is an innovative theory and technology architecture changing the design and application patterns of DIS. It provides simulation resource users with the feasible idea and solution to capture; access、share、analyze、and process simulation data for simulation application requirements.
Aiming at the requirements of data integration in the Simulation systems, this paper researches and analyzes the architecture and inner process of Globus and OGSA-DAI, proposes a design scheme of data integration platform based on Grid Service technology which resolves the problem of dynamic integration of heterogeneous databases.
With the development of XML technology,Grid service technology,database integration technology, this paper mainly discusses the design and implementation for the data integration platform for the simulation database.We provide services for different nodes of simulation data through standard grid service interfaces and use XML to eliminate heterogeneity of data model from various systems.At last this paper gives the tests and results for this integration platform and analyzes the characteristic of this platform with a simulation application examples.
而网格技术的出现为实现仿真异构数据集成的研究提供了一种创新性的理论与技术支持,它的出现将会改变分布仿真系统的设计和应用模式,为仿真资源用户对仿真数据进行信息获取、共享、访问、分析和处理等各种需求提供切实可行的解决思路和实施方案。
本文针对仿真异构数据集成的需求,研究和分析了数据网格中间件OGSA-DAI的内部架构和运行流程,提出了基于网格技术的仿真异构数据集成平台(简称FZJCXT平台)的体系结构。本文中结合XML技术、网格技术、数据库集成技术,重点阐述了FZJCXT平台的设计方案和实现方法。该系统通过标准化的网格接口为不同的数据节点提供服务,并通过XML格式进行数据转换和传输,消除不同系统的数据模式的异构性,将多个独立的仿真业务系统集成到网格环境中,提供了系统数据源的注册发布、数据查询以及数据抽取功能,实现了各个独立的、分布的系统之间的数据访问。本文最后针对具体仿真应用对集成平台进行了测试,给出了演示结果,进一步验证了本系统的可扩展性、松耦合性以及节点自治性。
With the appearance of DIS and HLA, computer simulation grows from single simulation systems to synthetically and network distributed simulation environment. Almost all simulation systems bring heterogeneity in computer hardware and interface,DBMS,network OS,development tools etc,makes the difficulties in resource sharing of all interactive simulation systems.
The integrate of simulation resource based on Grid is an innovative theory and technology architecture changing the design and application patterns of DIS. It provides simulation resource users with the feasible idea and solution to capture; access、share、analyze、and process simulation data for simulation application requirements.
Aiming at the requirements of data integration in the Simulation systems, this paper researches and analyzes the architecture and inner process of Globus and OGSA-DAI, proposes a design scheme of data integration platform based on Grid Service technology which resolves the problem of dynamic integration of heterogeneous databases.
With the development of XML technology,Grid service technology,database integration technology, this paper mainly discusses the design and implementation for the data integration platform for the simulation database.We provide services for different nodes of simulation data through standard grid service interfaces and use XML to eliminate heterogeneity of data model from various systems.At last this paper gives the tests and results for this integration platform and analyzes the characteristic of this platform with a simulation application examples.
引文
[1] 王行仁,先进仿真技术,测控技术,1996,18(6):5
[2] Joshy Joseph,Craig Fellenstein 著 战晓苏、张少华译,网格计算,北京 清华大学出版社 2005:21～125
[3] 刘俊毅,顾浩,王勇等,虚拟战场环境与分布交互仿真,舰船科学技术,1997(3):48
[4] 刘云生,张传富,张童,查亚兵,基于网格的分布式仿真系统负载平衡研究,计算机仿真,2004,21(6):58
[5] 齐欢、代建民、吴义明 HLA 仿真与 UML 建模 北京 科学出版社 2004:1～7
[6] 张耀程,李革,黄柯棣,军用仿真领域分布式数据管理与共享技术研究,计算机仿真, 2003,20(12):85
[7] 胡彬华,李 晓,梁 剑,异构分布式数据库系统集成的研究与实现,计算机应用研究,2002(10):67～68
[8] 毛善君,刘桥喜,杨锋杰,基于 ODBC 的矿山数据库管理系统开发的研究,计算机工程,2000,26(11):65
[9] 唐 巍,周俊林,李晓,异构数据库集成方法初探,计算机应用研究,1999(8):64～65
[10] 李军怀,周明全,耿国华等,XML 在异构数据集成中的应用研究,计算机应用, 2002, 22 (9):1012
[11] 周傲英,凌波.Peer-to-Peer 系统及其应用.计算机科学,2002 29(8):20～22.
[12] 孙研姑 基于 OGSA 的数据库网格查询系统的研究与实现[硕士学位论文] 南京 河海大学 2006:18-19
[13] 曾怡,张万军,杨进,李国庆.基于 OGSA 的数据库网格化封装方法.华中科技大学学报(自然科学版) 2005(1):32～33.
[14] 任浩,李志刚,肖侬,基于网格的多数据库系统,计算机工程与应用,2006(2):171～75
[15] I. Foster C. Kesselman, etc.., "The Physiology of the Grid:An Open Grid Services Architecture for Distributed Systems Integration," Globus Project 2002
[16] Richard Monson-Haefel 著 崔洪斌 王爱民译 J2EE Web Services 高级编程 北京 清华大学出版社 2005:4-9
[17] 王晨,基于网格的 Web Services,信息系统,2004 (1):18
[18] A. Chervenak, I. Foster, C. Kesselman, C. Salisbury, and S. Tuecke,The data grid: Towards an architecture for the distributed management and analysis of large scientific datasets,Journal of Network and Computer Applications, 1999.
[19] I.Foster,C. Kesselman, etc., "Grid Services for Distributed System Integration Computer, 2002,35(9): 28~40
[20] Neil Hardman, Andrew Borley, James Maqowan.,OGSA-DAI 体 系 与 数 据库,http://www.orirlteam.comlreleasel6.html,2005-2-24
[21] 金宝轩,边馥,基于 OGSA-DAI 的空间数据访问和集成研究,测绘信息与工程,2005 (6):38
[22] 刘建新,阎保平,OGSA-DAI 体系结构及其关键技术研究,计算机应用,2004,24(11):25～30
[23] 韩金华 基于网格的空间数据库集成研究与应用[硕士论文],南京,河海大学 2006
[24] 张海,关伟豪,曾海标,OGSA-DAI 在医学图像网格中的应用,中山大学学报.增刊(2),2005,44(11):122～124
[25] Neil Hardman, Andrew Borley, James Magowan,OGSA-DAI: A look under the hood: Part 2:Activities and results, IBM United Kingdom Limited 24 January 2004
[26] 胡敏,顾君忠,Globus 网格体系结构及其服务的实现.计算机工程,2003,29 (15):57
[27] 易开祥,胡敏,杨建,基于 B/S 模式的信息系统研究与设计,计算机工程,2000.8(29):31
[28] 柴晓路,XML 数据环境下基于关系模式的数据交换方法,IBM, 2001 年 6 月
[29] 陈传波,张道杰,基于 Web 服务的企业应用集成模型研究,计算机工程与科学,2004, 26(12):15～19
[30] 朱延东 信息网格环境下信息资源的异构集成与透明访问研究[硕士论文],南京,河海大学 2005
[31] GGF DAI Working Group, Data Service Specification: The XML Realization, 19t September 2003
[32] Jens-S. V?ckler Mike Wilde Ian Foster, The GriPhyN Virtual Data System, Technical Report GriPhyN-2002-02
[33] C. Baru, R. Moore, A. Rajasekar, and M. Wan,The sdsc storage resource broker. In CASCON’98,Toronto,Canada, December 1998, http://www.npaci.edu/SRB.
[34] R. J. Figueiredo, N. H. Kapadia, and J. A. B. Fortes,The punch virtual file system: Seamlessaccess to decentralized storage services in a computational grid. In Proceedings of the Tenth IEEE International Symposium on High Performance Distributed Computing. IEEE Computer Society Press, August 2001.
[35] J. Bester, I. Foster, C. Kesselman, J.Tedesco, and S. Tuecke. GASS: A data movement and access service for wide area computing systems. In Proceedings of the Sixth Workshop on Input/Output in Parallel and Distributed Systems, pages 78~88, Atlanta, GA, May 1999. ACM Press.
[36] 李冠宇,刘军,张俊,分布式异构数据集成系统的研究与实现,计算机应用研究,2004,9(9):8
[37] 杨彬,网格环境下异构数据资源的交换和集成研究[硕士论文],福州,福州大学 2005
[38] 吴豪,曾国荪,张季平,数据网格关键技术分析,计算机工程与应用,2003,8(35):18～30
[39] 徐彬,网格环境下数据库系统的元数据服务[硕士论文],武汉,华中科大,2004
[40] 武秀川,胡亮,菊九滨,数据网格的数据管理策略,小型微型计算机系统,2004,25(1):29
[41] 张海建,CDG 网格信息服务与任务调度分配模块的研究与实现[硕士论文],南京,南京航空航天大学,2004
[42] 刘星,网格环境下数据传输与备份管理机制研究[硕士论文],南京,南京航空航天大学,2004
[2] Joshy Joseph,Craig Fellenstein 著 战晓苏、张少华译,网格计算,北京 清华大学出版社 2005:21～125
[3] 刘俊毅,顾浩,王勇等,虚拟战场环境与分布交互仿真,舰船科学技术,1997(3):48
[4] 刘云生,张传富,张童,查亚兵,基于网格的分布式仿真系统负载平衡研究,计算机仿真,2004,21(6):58
[5] 齐欢、代建民、吴义明 HLA 仿真与 UML 建模 北京 科学出版社 2004:1～7
[6] 张耀程,李革,黄柯棣,军用仿真领域分布式数据管理与共享技术研究,计算机仿真, 2003,20(12):85
[7] 胡彬华,李 晓,梁 剑,异构分布式数据库系统集成的研究与实现,计算机应用研究,2002(10):67～68
[8] 毛善君,刘桥喜,杨锋杰,基于 ODBC 的矿山数据库管理系统开发的研究,计算机工程,2000,26(11):65
[9] 唐 巍,周俊林,李晓,异构数据库集成方法初探,计算机应用研究,1999(8):64～65
[10] 李军怀,周明全,耿国华等,XML 在异构数据集成中的应用研究,计算机应用, 2002, 22 (9):1012
[11] 周傲英,凌波.Peer-to-Peer 系统及其应用.计算机科学,2002 29(8):20～22.
[12] 孙研姑 基于 OGSA 的数据库网格查询系统的研究与实现[硕士学位论文] 南京 河海大学 2006:18-19
[13] 曾怡,张万军,杨进,李国庆.基于 OGSA 的数据库网格化封装方法.华中科技大学学报(自然科学版) 2005(1):32～33.
[14] 任浩,李志刚,肖侬,基于网格的多数据库系统,计算机工程与应用,2006(2):171～75
[15] I. Foster C. Kesselman, etc.., "The Physiology of the Grid:An Open Grid Services Architecture for Distributed Systems Integration," Globus Project 2002
[16] Richard Monson-Haefel 著 崔洪斌 王爱民译 J2EE Web Services 高级编程 北京 清华大学出版社 2005:4-9
[17] 王晨,基于网格的 Web Services,信息系统,2004 (1):18
[18] A. Chervenak, I. Foster, C. Kesselman, C. Salisbury, and S. Tuecke,The data grid: Towards an architecture for the distributed management and analysis of large scientific datasets,Journal of Network and Computer Applications, 1999.
[19] I.Foster,C. Kesselman, etc., "Grid Services for Distributed System Integration Computer, 2002,35(9): 28~40
[20] Neil Hardman, Andrew Borley, James Maqowan.,OGSA-DAI 体 系 与 数 据库,http://www.orirlteam.comlreleasel6.html,2005-2-24
[21] 金宝轩,边馥,基于 OGSA-DAI 的空间数据访问和集成研究,测绘信息与工程,2005 (6):38
[22] 刘建新,阎保平,OGSA-DAI 体系结构及其关键技术研究,计算机应用,2004,24(11):25～30
[23] 韩金华 基于网格的空间数据库集成研究与应用[硕士论文],南京,河海大学 2006
[24] 张海,关伟豪,曾海标,OGSA-DAI 在医学图像网格中的应用,中山大学学报.增刊(2),2005,44(11):122～124
[25] Neil Hardman, Andrew Borley, James Magowan,OGSA-DAI: A look under the hood: Part 2:Activities and results, IBM United Kingdom Limited 24 January 2004
[26] 胡敏,顾君忠,Globus 网格体系结构及其服务的实现.计算机工程,2003,29 (15):57
[27] 易开祥,胡敏,杨建,基于 B/S 模式的信息系统研究与设计,计算机工程,2000.8(29):31
[28] 柴晓路,XML 数据环境下基于关系模式的数据交换方法,IBM, 2001 年 6 月
[29] 陈传波,张道杰,基于 Web 服务的企业应用集成模型研究,计算机工程与科学,2004, 26(12):15～19
[30] 朱延东 信息网格环境下信息资源的异构集成与透明访问研究[硕士论文],南京,河海大学 2005
[31] GGF DAI Working Group, Data Service Specification: The XML Realization, 19t September 2003
[32] Jens-S. V?ckler Mike Wilde Ian Foster, The GriPhyN Virtual Data System, Technical Report GriPhyN-2002-02
[33] C. Baru, R. Moore, A. Rajasekar, and M. Wan,The sdsc storage resource broker. In CASCON’98,Toronto,Canada, December 1998, http://www.npaci.edu/SRB.
[34] R. J. Figueiredo, N. H. Kapadia, and J. A. B. Fortes,The punch virtual file system: Seamlessaccess to decentralized storage services in a computational grid. In Proceedings of the Tenth IEEE International Symposium on High Performance Distributed Computing. IEEE Computer Society Press, August 2001.
[35] J. Bester, I. Foster, C. Kesselman, J.Tedesco, and S. Tuecke. GASS: A data movement and access service for wide area computing systems. In Proceedings of the Sixth Workshop on Input/Output in Parallel and Distributed Systems, pages 78~88, Atlanta, GA, May 1999. ACM Press.
[36] 李冠宇,刘军,张俊,分布式异构数据集成系统的研究与实现,计算机应用研究,2004,9(9):8
[37] 杨彬,网格环境下异构数据资源的交换和集成研究[硕士论文],福州,福州大学 2005
[38] 吴豪,曾国荪,张季平,数据网格关键技术分析,计算机工程与应用,2003,8(35):18～30
[39] 徐彬,网格环境下数据库系统的元数据服务[硕士论文],武汉,华中科大,2004
[40] 武秀川,胡亮,菊九滨,数据网格的数据管理策略,小型微型计算机系统,2004,25(1):29
[41] 张海建,CDG 网格信息服务与任务调度分配模块的研究与实现[硕士论文],南京,南京航空航天大学,2004
[42] 刘星,网格环境下数据传输与备份管理机制研究[硕士论文],南京,南京航空航天大学,2004