DataWorks 功能实践速览03期 — 生产开发环境隔离

忘是亡心i 2022-09-09 09:57 230阅读 0赞

**简介：** DataWorks功能实践系列，帮助您解析业务实现过程中的痛点，提高业务功能使用效率！

往期回顾：

*  [DataWorks 功能实践速览01期——数据同步解决方案][DataWorks _01]：为您介绍不同场景下可选的数据同步方案。
 *  [DataWorks 功能实践速览02期——独享数据集成资源组][DataWorks _02]：为您介绍进行数据同步时，可使用的资源组与网络连通方案、注意事项。

通过前两期的介绍，您可以了解使用DataWorks进行数据同步的主要知识点：数据同步方案和资源组，而在实际应用过程中，我们常常会需要将开发和生产环境进行隔离，开发环境用于数据同步测试，生产环境用于生产数据的同步处理。本期就为您介绍DataWorks实现开发与生产环境隔离的主要知识点。

![功能实践速览03.png][03.png]

## 功能推荐：标准模式——开发环境与生产环境隔离 ##

为方便不同安全管控要求的用户生产数据，DataWorks为您提供**简单模式**和**标准模式**两种工作空间模式，其中**简单模式**无法设置开发环境和生产环境，而**标准模式**同时提供开发环境与生产环境，并将两个环境隔离开，您可以分别在开发环境和生产环境中进行数据任务处理。

## Part1：简单模式与标准模式的DataWorks工作空间 ##

首先为您介绍两种模式工作空间的主要区别。

<table> 
 <tbody> 
 <tr> 
 <td> 简单模式 </td> 
 <td> 标准模式 </td> 
 </tr> 
 <tr> 
 <td> 在简单模式工作空间下，一个DataWorks空间下层对应一个MaxCompute项目（或一个EMR集群、Hologres数据库等)，该环境即视为生产（PROD）环境。 <img alt="简单工作空间.png" src="https://img-blog.csdnimg.cn/img_convert/ea9a6e1984f07ce6024109a05d0c311e.png"> </td> 
 <td> 在标准模式工作空间下，一个DataWorks空间下层对应两个MaxCompute项目（或两个EMR集群、Hologres数据库等)，一个视为开发（DEV）环境，一个视为生产（PROD）环境。 <img alt="标准工作空间.png" src="https://img-blog.csdnimg.cn/img_convert/b1dcb970724f92f20f2a5f20dd0a131f.png"> </td> 
 </tr> 
 </tbody> 
</table>

由上可见，DataWorks的标准模式工作空间可以将开发、生产环境进行隔离，因此，如果您使用了标准模式后，进行数据访问与权限管控时，开发环境与生产环境的使用注意事项不一致。

## Part2：不同模式工作空间的数据访问 ##

您可以在DataWorks的**工作空间配置 > 计算引擎信息**区域，设置不同模式下，工作空间的数据访问模式。

![工作空间数据访问.png][.png]

<table> 
 <tbody> 
 <tr> 
 <td> 计算引擎类型 </td> 
 <td style="width:74px;"> 环境 </td> 
 <td style="width:257px;"> 标准模式工作空间 </td> 
 <td style="width:253px;"> 简单模式工作空间 （开发环境即生产环境） </td> 
 </tr> 
 <tr> 
 <td> MaxCompute </td> 
 <td style="width:74px;"> 开发环境 </td> 
 <td style="width:257px;"> 页面运行任务（不可选）：默认为执行任务者（当前登录者） </td> 
 <td style="width:253px;"> 页面运行任务（不可选）：默认为执行任务者（当前登录者） 调度访问身份（可选）： 
 <ul> 
 <li>阿里云主账号</li> 
 <li>阿里云RAM角色</li> 
 </ul> 
 <ul> 
 <li>任务负责人：任务Owner账号的身份</li> 
 </ul></td> 
 </tr> 
 <tr> 
 <td style="width:74px;"> 生产环境 </td> 
 <td style="width:257px;"> 调度访问身份（可选）： 
 <ul> 
 <li>阿里云主账号</li> 
 <li>阿里云RAM用户</li> 
 </ul> 
 <ul> 
 <li>阿里云RAM角色</li> 
 </ul></td> 
 </tr> 
 <tr> 
 <td> E-MapReduce </td> 
 <td style="width:74px;"> 开发环境 </td> 
 <td style="width:257px;"> 
 <ul> 
 <li>快捷模式下访问身份：统一使用集群内的Hadoop用户。</li> 
 <li>安全模式下访问身份：任务执行者</li> 
 </ul></td> 
 <td style="width:253px;"> 
 <ul> 
 <li>快捷模式下访问身份：统一使用集群内的Hadoop用户。</li> 
 <li>安全模式下访问身份（可选）：</li> 
 </ul> 
 <ul> 
 <li> 
 <ul> 
 <li>任务责任人</li> 
 <li>阿里云主账号</li> 
 </ul></li> 
 </ul> 
 <ul> 
 <li> 
 <ul> 
 <li>阿里云RAM用户</li> 
 </ul></li> 
 </ul></td> 
 </tr> 
 <tr> 
 <td style="width:74px;"> 生产环境 </td> 
 <td style="width:257px;"> 
 <ul> 
 <li>快捷模式下访问身份：统一使用集群内的Hadoop用户。</li> 
 <li>安全模式下访问身份（可选）：</li> 
 </ul> 
 <ul> 
 <li> 
 <ul> 
 <li>任务责任人</li> 
 <li>阿里云主账号</li> 
 </ul></li> 
 </ul> 
 <ul> 
 <li> 
 <ul> 
 <li>阿里云RAM用户</li> 
 </ul></li> 
 </ul></td> 
 </tr> 
 <tr> 
 <td> Hologres </td> 
 <td style="width:74px;"> 开发环境 </td> 
 <td style="width:257px;"> 页面运行任务（不可选）：默认为执行任务者（当前登录者）。 </td> 
 <td style="width:253px;"> 页面运行任务（不可选）：默认为执行任务者（当前登录者） 调度访问身份（可选）： 
 <ul> 
 <li>阿里云主账号</li> 
 <li>阿里云RAM用户</li> 
 </ul></td> 
 </tr> 
 <tr> 
 <td style="width:74px;"> 生产环境 </td> 
 <td style="width:257px;"> 调度访问身份（可选）： 
 <ul> 
 <li>阿里云主账号</li> 
 <li>阿里云RAM用户</li> 
 </ul></td> 
 </tr> 
 </tbody> 
</table>

## Part3：不同模式工作空间的权限管理特征 ##

DataWorks采取RBAC权限模型供用户管理DataWorks所有页面可见功能以及API的使用权限，同时这套权限体系与MaxCompute的RBAC角色体系存在天然的映射关系，详情可参见 [成员及角色管理][Link 1]与[成员角色与权限关系][Link 2]。不同工作空间类型的权限管理特征与优缺点不一致，以下表格为您对比介绍两种空间类型的权限细分特点。

<table> 
 <tbody> 
 <tr> 
 <td style="width:74px;"> 细分特点 </td> 
 <td style="width:279px;"> 简单模式 </td> 
 <td> 标准模式 </td> 
 </tr> 
 <tr> 
 <td style="width:74px;"> 权限概述 </td> 
 <td style="width:279px;"> 在简单模式空间下，DataWorks的“开发”角色因为与所绑定MaxCompute项目的“Role_Project_Dev” Role进行了映射，因此DataWorks开发角色天然能够读取MaxCompute项目内的所有数据。 </td> 
 <td> 在标准模式空间下，DataWorks的“开发”角色因为与所绑定MaxCompute项目（dev环境）的“Role_Project_Dev” Role进行了映射，因此： 
 <ul> 
 <li>DataWorks开发角色天然能够读取MaxCompute项目（dev环境）内的所有数据。</li> 
 <li>由于没有和MaxCompute项目（PROD环境）的role映射，因此默认情况下DataWorks开发角色无MaxCompute（PROD环境）的数据权限。</li> 
 </ul></td> 
 </tr> 
 <tr> 
 <td style="width:74px;"> 优点 </td> 
 <td style="width:279px;"> 简单、方便、易用。 仅需要授权数据开发人员“DataWorks开发角色”即可完成所有数据仓库开发工作。 </td> 
 <td> 安全、规范。 
 <ul> 
 <li>具备安全、规范的代码发布管控流程（包含代码评审、代码DIFF查看等功能），保障生产环境稳定性，避免不必要的因代码逻辑引起的脏数据蔓延或任务报错等非预期情况。</li> 
 <li>数据访问得到有效管控，数据安全得以保障。</li> 
 </ul></td> 
 </tr> 
 <tr> 
 <td style="width:74px;"> 缺点 </td> 
 <td style="width:279px;"> 存在不稳定、不安全的风险。 
 <ul> 
 <li>开发角色可以不经过任何人审批，随时新增、修改代码并提交至调度系统，给生产环境带来不稳定因素。</li> 
 <li>面向MaxCompute计算引擎时，开发角色默认拥有当前MaxCompute项目所有表的读写权限，可随意对表进行增加、删除和修改等操作，存在数据安全风险。</li> 
 </ul></td> 
 <td> 流程相对复杂，一般情况下无法一人完成所有数据开发、生产流程。 </td> 
 </tr> 
 </tbody> 
</table>

## MaxCompute引擎在不同模式下数据库表命名规范 ##

简单模式下不区分开发环境和生产环境，开发库即生产库。标准模式下，支持开发环境和生产环境隔离，开发环境和生产环境的数据库表命名有所区别，如果需要在开发环境访问生产环境的数据库表，请根据以下命名规范严格区分数据库表名，避免误操作生产环境。

<table> 
 <tbody> 
 <tr> 
 <td> 环境类型 </td> 
 <td> 标准模式 </td> 
 <td> 示例 </td> 
 </tr> 
 <tr> 
 <td> 开发环境 </td> 
 <td> 项目名_dev.表名 </td> 
 <td> 在projectA项目下创建一个开发库表user_info，则数据库表名为：projectA_dev.user_info。 </td> 
 </tr> 
 <tr> 
 <td> 生产环境 </td> 
 <td> 项目名.表名 </td> 
 <td> 在projectA项目下创建一个生产库表user_info，则数据库表名为：projectA.user_info。 </td> 
 </tr> 
 </tbody> 
</table>

更多的简单模式与标准模式的区别可前往[帮助中心][Link 3]。

## 场景实践： ##

[权限管理与规范化数据开发][Link 4]：通过本实践，您可以了解使用标准模式的工作空间时，用户进行数据开发的标准流程与权限管控建议。

[原文链接][Link 5]

本文为阿里云原创内容，未经允许不得转载。

[DataWorks _01]: https://developer.aliyun.com/article/786080
[DataWorks _02]: https://developer.aliyun.com/article/787172
[03.png]: /images/20220829/d7783aa918f94cd6b52d8def331f4954.png
[.png]: /images/20220829/f3e1483fb8db4665a34dda27b1b78b60.png
[Link 1]: https://help.aliyun.com/document_detail/136941.htm#task-2059693
[Link 2]: https://help.aliyun.com/document_detail/105012.htm#section-bvy-gf1-4gb
[Link 3]: https://help.aliyun.com/document_detail/85772.html
[Link 4]: https://help.aliyun.com/document_detail/292200.html
[Link 5]: http://click.aliyun.com/m/1000292470/