欢迎user
数据的ETL是指把用户的源主机上的数据通过ETL工具迁移到大数据平台,并且能够保证增量数据的完整性。
用户数据的种类繁多有结构化数据、半结构化数据、非结构化数据。H3C将提供各种迁移工具满足各种场景。
H3C ETL服务,可支撑用户TB、PB级别的数据迁移。提供更快速、更可靠的物有所值的专业化ETL服务,帮助客户高效的完成数据的迁移。
在实施数据ETL的过程中,我们除了要关注迁移过程的可靠性,还需要关注迁移的性能,即迁移的时间和对业务系统的影响,数据迁移的效率指标包括以下三个方面:
整体迁移时间:从源主机开始迁移到迁移结束的时间
对业务系统的性能影响:迁移对源主机上业务系统的影响程度
增量数据的自动化迁移
H3C ETL服务的目标是最小化整体迁移的时间和业务停机时间,并且迁移对于源主机上运行服务的性能造成的影响降低。在迁移过程中,这几个因素互相影响,H3C将针对不同的业务场景和客户需求,进行充分和专业的评估与分析,并设计合理的和定制化的迁移方案,以达到预期的目标。
H3C 大数据ETL服务根据客户个性化的需求和现场环境信息,通过综合性的评估和分析,提供有针对性的方案设计和严谨的实施计划,并提供专业化的数据ETL过程中的安装、调测、联调和集成验证。最后H3C还将为客户提供现场的操作演示和培训,使得客户在系统运行过程中,具备基本的数据ETL的能力。
以下内容较复杂,建议在PC上浏览。
在PC浏览器上输入c.h3c.com.cn,按页面操作,即可同步到PC上继续浏览。
继续手机浏览
H3C数据ETL服务具有各种显著的优势,并提供灵活的选择,以帮助客户成功的完成数据的迁移,包括全量、增量数据及自动化。
快速响应:强大的专业化团队和遍布全国的办事处和渠道服务工程师,可快速响应客户的需求。
定制化:基于客户的实际业务环境和目标,经过专业的评估和分析,定制较符合客户需求和业务目标的较佳ETL方案。
专业化:经验丰富的服务专家,利用先进且成熟的ETL工具,可为所有客户的数据ETL提供较佳实践。
完整性:结合规划、设计、迁移、验证和演示培训等服务为一体,为客户提供端到端的一体化ETL服务。
多样化:H3C可同时提供多种ETL工具满足不同的场景。
H3C大数据ETL服务是H3C大数据平台建设的重要环节,用于将客户的业务系统的数据迁移到H3C 大数据平台。
H3C 大数据平台ETL服务为客户提供了端到端的服务,服务交付人员需要详细了解客户需求,深入分析客户业务系统现状,设计出切实可行的实施方案,并细化成可供实施的各种图、表、配置文件等交付件。
H3C大数据ETL服务内容如下表所示:
服务名称 | 服务描述 |
详细信息收集 | H3C服务专家将根据信息收集模板,通过电话或现场交流的方式,收集客户需求和现场环境信息,主要收集内容如下: ² 客户当前的服务器配置(CPU、内存、磁盘) ² 当前组网拓扑、设备类型、配置、接口等 ² 数据源信息(数据表数量、表结构、数据量、增量数据等) ² ETL需求(数据源访问方式、数据安全、脱敏等) |
评估和分析 | 根据信息收集的结果,对用户数据ETL进行评估和规划,主要包括如下内容: ² 评估当前数据源物理服务器资源利用率,分析是否满足数据的ETL。 ² 评估当前数据源的数据种类、数据量、增量数据、数据字典等信息,分析采用何种ETL工具迁移,增量数据如何迁移。 ² 评估当前大数据平台可用资源(计算、存储、网络等)是否具备数据ETL的条件。 ² 评估数据ETL过程对业务系统的风险,包括业务暂停、数据丢失、性能下降等,并提出相应的规避或回退措施。 |
实施方案设计 | 根据客户的实际需求和信息收集的结果,进行具体的实施方案设计,主要包括以下内容: ² 采用合适的数据ETL工具 ² 数据处理,包括错误数据处理等 ² 定时增量数据抽取 ² 数据质量管理,数据字典整理等 ² 方案实施计划,与客户讨论,共同确定合适的时间计划。 |
数据ETL | 通过实施环境准备阶段的工作,确认现场环境满足进场实施的条件后,即可根据实施方案设计中确定的内容和计划进行数据的抽取、转换和加载工作,主要内容包括: ² H3C DataEngine DI软件安装和部署 ² 数据ETL ² 增量数据ETL ² 自动化配置 |
集成验证 | 完成ETL的安装、调测和联调之后,将进行系统的集成验证,以确认ETL系统各项功能和特性运行正常,主要包括如下内容: ² 根据客户需求和业务环境,输出测试方案 ² 与客户讨论,制定明确的测试计划 ² 根据测试计划中的时间点,按照测试方案中的内容和步骤进行ETL功能验证测试 ² 完成测试后,输出测试报告 |
知识传递 | 根据客户需求和现场环境信息,确定现场演示培训的内容和计划,主要内容包括: ² H3C DataEngine DI平台日常管理、维护操作演示 ² H3C 数据ETL操作演示 ² 客户问题答疑 |
售前咨询
H3C售前工程师在线为您提供帮助