如何通过DMS实现高效的数据管理？

DMS（Data Management Service）是数据管理服务，它提供统一管理多种数据库的服务，集成了 数据管理、安全审计等功能。

一、DMS

DMS是一款支撑数据全生命周期的一站式数据管理平台，提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，致力于帮助企业高效、安全地挖掘数据价值，助力企业数字化转型。

二、DMS的主要功能

1、全域数据资产管理：支持关系型数据库、NoSQL、OLAP、文件及日志等多种数据源的管理，可对实例、库、表进行业务分类归属管理，便于管理人员、开发人员及运维人员更好地管理或使用数据，还支持实例、数据库、表、功能、工单的全局搜索，能快速检索可用数据。

2、数据分类管理：对实例、库、表进行业务分类归属管理，方便不同角色的人员更好地管理和使用数据。

3、快速查找数据：支持实例、数据库、表、功能、工单的全局搜索，基于图谱能力，可快速定位所需数据。

4、可靠的数据安全治理：内置阿里巴巴最新研发规范，规避无主键等不合理设计带来的潜在风险，目前支持200多种设计及审核规范，并可按需调整，支持全方位细粒度安全管理，包括实例、库、表、数据列、数据行级权限管理，以及域账号自动管理，有效避免企业员工流转时可能出现的数据泄露风险，还全面覆盖中华人民共和国网络安全法、欧盟通用数据保护条例GDPR、SOX法案、PCI DSS、HIPAA等法律法规，实现敏感数据的自动分类分级，有效识别异常访问风险。

5、合规审计：支持企业上市合规审计、常规内审等功能，全方位支持员工权限和数据库变更、访问的流水审计。

6、多法律法规覆盖：全面覆盖中华人民共和国网络安全法、欧盟通用数据保护条例GDPR、SOX法案、PCI DSS、HIPAA等法律法规，实现敏感数据的自动分类分级，有效识别异常访问风险。

7、安全访问代理：复用了DMS内已有的安全规则、数据权限、敏感列配置等，可以实现在DMS平台外安全地访问数据库。

8、数据库平滑迁移工具：DMS提供了DTS数据迁移工具，覆盖数据库迁移的全生命周期，可实现数据库的平滑迁移。

9、数据库管理：可进行数据库实例信息的查看、录入、编辑，对实例、库、表、数据列、行级进行授权、回收权限、禁用、启用、删除等管理操作。

10、元数据访问控制：支持实例、数据库仅被有权限用户使用。

11、SQL审核优化：结合安全规则的SQL审核优化建议，对上传的SQL语句进行审核并提供优化建议，避免无索引或不规范的SQL语句，降低SQL注入风险。

12、整体性能的诊断报告：整合数据库自治服务DAS的部分功能，掌握数据库实例的性能状况，有效保障数据库服务的稳定、安全及高效。

13、变更异常回滚：快速找到异常时间段内的相关变更，生成逆向的回滚语句，修复数据。

14、多引擎支持：客户通过统一的方式对多种引擎进行开发，无需考虑引擎的差异性。

15、自定义研发流程：可按照企业规范，对不同业务配置不同的研发流程，保障多套环境之间的结构一致性。

16、敏捷高效：基于设计规范，研发人员全自助即可完成合规的数据库开发，非生产环境可做到免审批，仅生产环境需要审核，保障安全的同时，实现高效协同。

17、测试环境自动构建：提供库级别的数据复制能力，支持批量生成各类随机值、地区名、虚拟IP地址等信息，大大减轻准备测试数据的负担。

18、SQL复用：支持添加和管理常用SQL，实现SQL模板的复用。

19、低代码数据加工：批量数据加工，简单配置连线后即可满足各项离线数据集成任务，同时任务支持复杂调度。

20、多场景支持：支持离线数仓搭建、数仓提速、离线数据分析、数据中台搭建、大规模数据集成、离线计算、异构数据集成等场景。

21、低门槛：近乎零代码，简单配置连线后即可满足各项离线数据集成任务，同时任务支持复杂调度。

22、基于资产的虚拟湖：配合数据资产，可创建企业的数据资产虚拟湖，随取随用，降低企业建湖、运维成本。

23、多场景支持：支持实时数仓、多表实时拼接查询、实时数据处理与上传、实时报表、业务与计算分离、实时业务问题定位等场景。

24、高效低延时：通过DTS获取和写入数据，支持分布式并发读写，效率高于Flink，数据准确性更高。

25、混合编排模式：任务流支持多种引擎混合编排，支撑复杂业务流程。

26、复杂任务管理与调度：结合DMS账号与数据权限管理机制，能够进行复杂任务的管理与调度，提升开发过程的安全性。

27、运维机制完善：通过任务运行日志、数据血缘及监控机制，提供完善运维能力。

28、实时数据传输：基于DTS的实时数据传输，提供数据迁移、数据同步、数据订阅功能，满足不同的传输需求，支持分布式集成架构，突破单机瓶颈，同时提供限流手段，按需限流保护数据源，运维简单，通过性能监控、端到端一键诊断功能及报警监控等策略，实现极低运维门槛，灵活调度，按需配置调度，调度周期低至5分钟。

29、数据灾备（DBS）：使用飞天分布式存储作为内置存储，备份数据会转换成专用格式，并经过压缩保存到内置存储，降低存储成本，支持按量付费，避免一次性投入大量资产，同时支持存储分级，自动将备份数据存放到不同性价比存储介质中，适用于长期归档，降低成本，实时备份日志内存实时捕获，恢复点目标RPO达到秒级，并行备份全程无锁备份、多线程并行备份、数据拉取自适应分片，任意时间点恢复提供可恢复日历及时间轴选择，在进行数据恢复时，通过全量备份与增量备份实现精确到秒级的数据库恢复，最大限度保障数据安全，多规格弹性扩展，无缝支撑企业不同阶段性能要求，传输存储加密使用SSL和AES256加密技术，保护备份数据传输和存储安全。

三、DMS的优势

1、全域数据资产管理：支持企业全域数据资产管理，提供贯穿数据生命周期的质量治理与安全治理，帮助企业快速地查找数据，高效地使用数据。

2、数据集成：支持常见数据源的实时、离线数据集成，数据集成过程中支持灵活自定义数据的处理逻辑，帮助解决企业数据孤岛的痛点。

3、简单易用：提供覆盖数据全生命周期的数据流转及处理能力，通过提供图形化、向导式的开发模式，智能预警及自主诊断修复等能力，降低企业数据价值挖掘门槛。

4、高效协同：提供覆盖数据全生命周期的DevOps，内置阿里巴巴大规模实践的数据管控体系，保障数据安全的同时，提升企业研发效率。

四、DMS的使用方式

1、控制台：提供图形化的Web界面，操作方便。

2、API：控制台上所有的操作都可以通过API实现。

五、DMS的产品定价

具体产品定价信息可参见DMS的计费项。

六、DMS的学习路径

用户可以通过DMS学习路径，由浅入深地了解DMS的相关概念、基础操作、进阶操作等。

七、FAQs

1、什么是DMS？

DMS即Data Management System，是一款支撑数据全生命周期的一站式数据管理平台，它提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，同时内置的数据灾备（DBS）还提供了低成本、高可靠的备份恢复能力。

2、DMS如何帮助企业实现数字化转型？

DMS通过提供全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能，帮助企业高效、安全地挖掘数据价值，它解决了企业在数据管理过程中面临的诸多挑战，如数据孤岛、数据质量不高、数据安全风险等，从而助力企业实现数字化转型。