阅识风云是华为云信息大咖,擅长将复杂信息多元化呈现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您快速上手华为云。更多精彩内容请单击此处。
**摘要:**欢迎来到云数据迁移CDM的世界,跟着云小课一起学习云数据迁移。本课主要介绍云数据迁移的基本概念、功能、应用场景及使用过程,帮助您更好的了解云数据迁移。
本文分享自华为云社区《【云小课】EI第35课 云小课带你快速掌握云数据迁移CDM》,原文作者:阅识风云
云数据迁移(Cloud Data Migration,简称CDM)是一种高效、易用的批量数据迁移服务,提供同构/异构数据源之间批量数据迁移服务,帮助客户实现数据自由流动。支持客户自建和公有云上的文件系统,关系数据库,数据仓库,NoSQL,大数据云服务,对象存储等数据源。
CDM同时也可以作为数据湖治理中心(Data Lake Governance Center,简称DGC)服务的一个组件,在产品能力上和独立形态保持一致,为DGC提供了简单易用的迁移能力和多种数据源到数据湖的集成能力,降低了客户数据源迁移和集成的复杂性,有效的提高您数据迁移和集成的效率。
CDM提供了大数据迁移上云、数据批量入湖两种应用场景。
CDM使用简单,您只需通过可视化界面对数据源和迁移任务进行配置,CDM会对数据源和任务进行全面的管理和维护,您只需关注数据迁移的具体逻辑,无需关心环境等问题,极大降低了开发维护成本。
一个CDM集群运行在一个弹性云服务器之上,您可以在集群中创建数据迁移作业,在云上和云下的同构/异构数据源之间批量迁移数据。
目前CDM支持以下规格供用户选择:
批量数据迁移有两种迁移方式,支持的数据源不相同:
这里以MySQL导入到DWS为例,首先我们在源端作业配置中选择模式和表名,然后在目的端作业配置中选择要迁移到哪个表中,这里还可以配置是否自动创建目标表、DWS存储模式等选项。
CDM会自动匹配源端和目的端的数据表字段,这里系统会按照自然顺序列出来,如果需要调整的话,可以调整字段的映射关系。
配置任务调度信息,可以配置定时任务,是否写脏数据,任务并发数等参数。
执行结果的这个截图这是一个真实的测试数据,这个MySQL到DWS作业迁移了一亿条记录,数据量大约14GB,使用了5分38秒,每秒迁移接近30万条数据。
还等什么,实践一下,快去体验云数据迁移更多功能吧!
了解更多云数据迁移信息,戳这里。
版权说明 : 本文为转载文章, 版权归原作者所有 版权申明
原文链接 : https://blog.csdn.net/devcloud/article/details/122101536
内容来源于网络,如有侵权,请联系作者删除!