劳动与社会保障数据交换平台技术方案

劳动与社会保障数据交换平台技术方案内容摘要：

igger 由 DB2 的复制机制自动维护 )。 图 SQL 复制机制 源数据与目标数据间的复制转换 源数据与目标数据之间 ,往往存在着数据类型、格式、逻辑等不一致。 为了使目标数据源能够读懂、接受复制数据源的数据，就必须进行复制转换。 在复制过程中的常用转换方法有如下两种： 复制映射和添加计算列 ： 复制映射主要指复制源和目标之间的列映射，可以用如下图所示的配置工具实现。 鼠标拖拽产生的箭头指示源与目标列的对应关系。 “添加计算列”可以使用 SQL 对复制源的某 列进行运算，产生一个计算列，该列的定义记录在复制控制表中，不影响源表。 如下图紫色方框标注的两列：右侧的是目标列，其定义长度为 30 个字符；左侧的是对源表某列作 SUBSTR 字符串截取生成的计算列，截取前 30 个字符。 此外常用的 SQL 还有 DATE 函数、 CASE语句等等。 15 图：复制映射和添加计算列 两阶段复制：一致更改数据 CCD 表作中间表 两阶段复制的优势在于能够获取数据增量及其类别，并结合多种数据转换方法。 两阶段复制中，首先由源表复制到一致更改数据 CCD 表，后者能够记录在源表上所有的更改操作的类型（插入、更新 及删除）和结果，从而捕获源表中所有的增量信息。 第二阶段，开发者可以编写存储过程、或应用程序处理 CCD 表中的数据，再采用复制方法使数据作用到最终目标表。 可配置、可管理的数据分发 数据分发主要指 Apply 的过程，即将复制数据源的增量应用到复制目标。 数据分发过程中的配置和管理，对复制的可靠性和可管理十分重要。 数据分发提供的配置选择包括：启动 /停止数据应用到目标表；选择连续复制方式或设置复制时间间隔等；提供自动数据分组、出错自动回滚等功能，处理传输过程中的异常处理，用户可配置发生网络或系统故障时的传输重试间隔。 3）双层认证授权机制 WebSphere II 的双层认证授权机制，充分保证异地数据访问下的数据安全。 16 Information Integrator 用户对数据的操作权限，取决于各个应用系统数据库向它开放的用户的授权，是且仅可能是后者的子集。 通过开放不同权限的用户给Information Integrator，可限制通过 II 的用户访问的数据内容和数据库操作（如插入、修改和删除），这样就保证了业务数据的安全性，不会出现超越业务授权的所谓超级用户，消除数据安全隐患。 三、 IBM 信息集成技术的特点 全局统 一的数据视图 按照 IBM 的预想，信息集成基础构架必须为应用层提供对其所需访问数据的全局统一的数据视图，使应用对数据的访问不受数据格式、数据位置和访问接口差异的限制。 对数据管理系统的发展不仅是要实现对单一数据库中存储的信息进行管理，而且还要能够提供对所有形式数据的增值性集成、对数据安排实施动态管理以满足可用性、实时性同时满足性能要求以及提供可继续减轻 IT 人员管理复杂数据体系结构负担的自主特色功能。 为此， IBM 制订了一项代号为 Xperanto 的计划，旨在应对客户对集成结构化、半结构化和非结构化数据 的需求。 依靠在研究上的不断投资及在关系数据、 XML、内容管理、联邦、搜索和复制等领域所拥有的可靠的数据管理技术， IBM 正着手开发集成式基础构架（如下图所示）。 17 IBM 基础构架凭借一系列程序设计模型、一套丰富的集成特色功能及与 IBM 的整个业务集成框架的互操作性提供了灵活的访问方式。 灵活的访问方式 IBM 的设想是通过行业标准接口提供对信息集成基础构架的灵活访问。 客户应用访问信息可通过 ODBC、 JBDC、网络服务、本地客户机或异步客户机接口来实现。 无论数据是 分布在何种数据库 ,文件或消息队列中 ,应用对数据的访问都如同是在对一个逻辑的数据库进行 . 它所支持的查询语言将包括：  结构化查询语言 (SQL)：业界最成熟、功能最强大的查询语言，市场应用广泛；  XQuery：有关 XML 数据访问的新兴标准，万维网协会 (W3C) 目前正在进行其标准化工作  IBM DB2 Content Manager： 是面向对象的应用程序编程接口，它支持内容管理生命周期，包括富文本和图像查询。 无论采用何种客户访问方式和查询语言，应用程序都应能够访问通过集成服务 18 器连接的所有数据。 这种客 户访问和查询语言灵活性的组合使现有开发和分析工具能够通过集成服务器访问更广泛的数据 ,并直接利用集成服务器所提供的信息集成功能。 它还使基础构架能够通过 Web Services 适应以服务为导向的体系结构，还可提供与工作流异步集成或轻松调度长耗时的查询任务，并能保护您在现有和新应用程序基础构架上的投资。 丰富的特色功能 利用 IBM 信息集成基础构架可实现对各种分散于各处的实时数据的集成，就好像它们来自同一数据源。 该基础构架具有联邦、搜索、高速缓存、转换和复制异构数据等重要的功能： 联邦 : IBM 提供业界领先的对相异数据源的联邦功能。 联邦的概念是：用户可以像对待一个数据源那样对多个数据源实施查询和处理，同时保持数据源各自的独立性和完整性。 视实施的具体情况，这些数据源可能是同构或异构数据源，也可能是集中或分散的数据源。 IBM 的联邦引擎提供了下述功能： 透明度 :它具有屏蔽作用，可协助使用户在访问数据时 ,无法察觉底层数据源的差异、特质和实现方式，并使一组联邦数据源看上去就像是一个系统。 19 异构性 : 一如其名它具有联邦异构类型数据的功能，这些数据类型包括结构化数据（例如，关系 数据库）、半结构化数据（例如， XML 文档）、非结构化数据（例如，自由格式文本）。 可扩展性 : 一种可将联邦能力扩展到几乎任何数据源的功能。 可扩展性专为这一目的而设计，即最大程度降低集成新数据源的工作量，同时灵活地为优化查询访问提供必要的信息。 丰富的函数功能 : 包括通过支持的查询语言提供的函数、对后端数据源中所缺函数的补偿以及将数据源专用功能无缝嵌入到查询语言中的功能。 数据源自主性 : 即可将数据源联邦在一起，而对现有应用程序或系统没有或几乎没有影响。 性能优化 : 使联邦查询成为一种现实备选方案的性能特性。 凭借超过 25 年的研究和开发经验及专利的优化技术， IBM 可以事实证明，联邦是一个能够满足性能要求的可行方案。 搜索 : IBM 的基础构架将提供高级搜索和查询功能，包括网络爬行、文档索引建立、多搜索引擎搜索结果联邦、以实现智能访问为目标的文本文档分类和摘要信息建立以及语义理解。 2020 年， IBM 组建了“ IBM 搜索和文本分析研究院”，以通过集成式体系结构统一并加速 IBM 在高级搜索和挖掘功能上的研究和部署。 研究成果将可为 IBM 信息集成平台以及其它 IBM 方案提供动力。 高速缓冲存储器 : IBM 的信息集成基础构架将支持在数据层级中的多个点放置和管理数据，以改善性能。 这绝非是简单的高速缓存功能，而是基于策略的数据安排和管理。 需要由一系列高速缓存策略才能向发出请求的应用程序提供足够的性能、实时性和可用性特性。 转换 : 基础构架必须提供丰富的转换特色功能，以便进行分析、交换和呈现。 转换功能完成不同类型数据库 SQL 语句的动态转换 (如数据类型及函数的匹配 ).另外还包括对数据源缺失函数的补偿和原有数据源专用功能 (如存储过程和用户自定义函数 )的嵌入。 复制 : 作为信息集成基础构架的一个基本特征，复制功能不可 或缺。 它是分布 20 式访问特色功能的有益补充，实现了对集中式数据存储器的管理，并为高效管理数据高速缓冲存储器提供了必需的基础构架。 信息集成可实现异构关系型数据源之间的相互复制 . 支持多点对一点的数据集中模式和一点对多点的数据分发模式 . 包括初始的数据同步和增量的鉴别和同步 . 并提供对复制过程的监控 . 简化全面业务集成 : 如前所提及，信息集成只是整个业务集成基础构架的一部分。 为支持业务的改良需求，此基础构架补充了强健的数据和内容存储器及附加集成技术，并采用了行业标准。 数据存储： IBM 现今提供业内领先的关系数据库 管理系统和内容管理系统，并在提供集成 XML 支持方面引领着行业的发展。