DataWorks快速入门

分手后的思念是犯贱 2023-09-30 14:09 9阅读 0赞

## 快速入门 ##

### 入门概述 ###

> **说明**
> 
>  *  如果您是第一次使用DataWorks，请确认已经根据[准备工作][Link 1]模块的操作，准备好账号和工作空间角色等内容后，登录DataWorks控制台，单击相应工作空间后的**进入数据开发**，即可进行数据开发操作。
>  *  本模块的操作在标准模式的工作空间下进行。如果您使用的是简单模式的工作空间，操作步骤同标准模式。但在提交任务时，不会区分开发环境和生产环境。

通常，通过DataWorks的工作空间实现数据开发和运维包含以下操作：

**1.建表并上传数据**  
**2.创建业务流程**  
**3.创建同步任务**  
**4.设置周期和依赖**  
**5.运行及排错**  
**6.使用临时查询快速查询SQL（可选）**

下图为数据开发和运维的基本流程。

![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_16_color_FFFFFF_t_70_g_se_x_16]

### 建表并上传数据 ###

以创建表bank\_data和result\_table为例，为您介绍如何通过DataWorks创建表并上传数据。

#### 前提条件 ####

您在**工作空间配置**页面添加**MaxCompute**计算引擎实例后，当前页面才会显示**MaxCompute**目录。详情请参见[配置工作空间][Link 2]。

#### 背景信息 ####

表bank\_data用于存储业务数据，表result\_table用于存储数据分析后产生的结果。

#### 创建表bank\_data ####

1.进入**数据开发**页面。

*  登录DataWorks控制台。
 *  在左侧导航栏，单击**工作空间列表**。
 *  选择工作空间所在地域后，单击相应工作空间后的进入数据开发。

2.在**数据开发**页面，鼠标悬停至![新建][db0ed185e50d9df4643032cb2e2ba05e.png]图标，单击**MaxCompute> 表**。

![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_15_color_FFFFFF_t_70_g_se_x_16]

您也可以打开相应的业务流程，右键单击**MaxCompute**，选择**新建 > 表**。

3.在**新建表**对话框中，输入**表名**为**bank\_data**，单击**提交**。

> **注意**
> 
>  *  表名不能超过64个字符，且必须以字母开头，不能包含中文或特殊字符。
>  *  如果绑定多个实例，则需要选择MaxCompute引擎实例。

4.在表的编辑页面，单击**DDL模式**。

5.在**DDL模式**对话框中，输入如下建表语句，单击**生成表结构**。

CREATE TABLE IF NOT EXISTS bank_data
    (
     age             BIGINT COMMENT '年龄',
     job             STRING COMMENT '工作类型',
     marital         STRING COMMENT '婚否',
     education       STRING COMMENT '教育程度',
     default         STRING COMMENT '是否有信用卡',
     housing         STRING COMMENT '房贷',
     loan            STRING COMMENT '贷款',
     contact         STRING COMMENT '联系途径',
     month           STRING COMMENT '月份',
     day_of_week     STRING COMMENT '星期几',
     duration        STRING COMMENT '持续时间',
     campaign        BIGINT COMMENT '本次活动联系的次数',
     pdays           DOUBLE COMMENT '与上一次联系的时间间隔',
     previous        DOUBLE COMMENT '之前与客户联系的次数',
     poutcome        STRING COMMENT '之前市场活动的结果',
     emp_var_rate    DOUBLE COMMENT '就业变化速率',
     cons_price_idx  DOUBLE COMMENT '消费者物价指数',
     cons_conf_idx   DOUBLE COMMENT '消费者信心指数',
     euribor3m       DOUBLE COMMENT '欧元存款利率',
     nr_employed     DOUBLE COMMENT '职工人数',
     y               BIGINT COMMENT '是否有定期存款'
    );

创建表的更多SQL语法请参见[创建和查看表][Link 3]。

6.在**确认操作**对话框中，单击**确认**。

7.生成表结构后，在**基本属性**模块输入表的**中文名**，并分别单击**提交到开发环境**和**提交到生产环境**。

> **说明** 本示例以标准模式的工作空间为例。如果您使用的是简单模式的工作空间，仅单击提交到生产环境即可。

8.在左侧导航栏，单击**表管理**。

9.在表管理页面，双击打开相应的表名，查看表信息。

#### 创建表result\_table ####

1.  在**数据开发**页面，鼠标悬停至![新建][db0ed185e50d9df4643032cb2e2ba05e.png]图标，单击**MaxCompute> 表**。您也可以打开相应的业务流程，右键单击**MaxCompute**，选择**新建 > 表**。
2.  在**新建表**对话框中，输入**表名**为**result\_table**，单击**提交**。
3.  在**DDL模式**对话框中，输入如下建表语句，单击**生成表结构**。

CREATE TABLE IF NOT EXISTS result_table
    (  
     education   STRING COMMENT '教育程度',
     num         BIGINT COMMENT '人数'
    );

1.  在**确认操作**对话框中，单击**确认**。
2.  生成表结构后，在**基本属性**区域输入表的**中文名**，并分别单击**提交到开发环境**和**提交到生产环境**。
3.  在左侧导航栏，单击**表管理**。
4.  在**表管理**页面，双击打开相应的表名，查看表信息。

#### 本地数据上传至bank\_data ####

DataWorks支持以下操作：

*  上传本地的文本文件至工作空间的表中。
 *  通过数据集成模块，从多个不同的数据源导入业务数据至工作空间。

> **说明** 本地文本文件上传的限制如下：
> 
>  *  文件类型：仅支持\*\*.txt\*\*、**.csv**和\*\*.log\*\*类型的文件。
>  *  文件大小：不能超过30 MB。
>  *  操作对象：支持分区表导入和非分区表导入，但不支持分区值为中文。

以导入本地文件[banking.txt][]至DataWorks为例，操作如下：

1.  在**数据开发**页面，单击![导入][1f2869ab70fb8b68132c9165eadd9ca9.png]图标。

![请添加图片描述][c61a59f544324dde8a4f9644cc26f8e6.png]

1.  在**数据导入向导**对话框中，至少输入3个字母来搜索需要导入数据的表，单击**下一步**。
2.  **选择数据导入方式**为**上传本地数据**，单击**选择文件**后的**浏览…**。选择本地数据文件，配置导入信息。

![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16]

![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 1]

1.  单击**下一步**。
2.  选择目标表字段与源字段的匹配方式，本示例选择**按位置匹配**。
3.  单击**导入数据**。

### 创建业务流程 ###

#### 前提条件 ####

开始本操作前，请确保您已经在工作空间中准备好业务数据表**bank\_data**和其中的数据，以及结果表**result\_table**。详情请参见[建表并上传数据][Link 4]。

#### 创建业务流程 ####

1.  登录DataWorks控制台。
2.  在左侧导航栏，单击**工作空间列表**。
3.  选择工作空间所在地域后，单击相应工作空间后的**进入数据开发**。
4.  在**数据开发**页面，鼠标悬停至![新建][db0ed185e50d9df4643032cb2e2ba05e.png]图标，单击**业务流程**。
5.  在**新建业务流程**对话框中，输入**业务名称**和**描述**。
    
    > **注意** 业务名称必须是大小写字母、中文、数字、下划线（\_）以及小数点（.），且不能超过128个字符。
6.  单击**新建**。

#### 创建节点并配置依赖关系 ####

在业务流程中创建一个虚拟节点（**start**）和ODPS SQL节点（**insert\_data**），并配置依赖关系为insert\_data依赖于start。

> **注意**
> 
>  *  虚拟节点属于控制类型节点，在业务流程运行过程中，不会对数据产生任何影响，仅用于实现对下游节点的运维控制。
>  *  虚拟节点在被其它节点依赖的情况下，如果被运维人员手动设置为运行失败，则下游未运行的节点将因此无法被触发运行。在运维过程中，可以防止上游的错误数据进一步扩展。
>  *  业务流程中，虚拟节点的上游节点通常会被设置为工作空间根节点。工作空间根节点的格式为`工作空间名称_root`。
>  *  DataWorks会为节点自动添加一个节点名的输出，结构为**工作空间名称.节点名称**。如果一个工作空间下有两个同名的节点，请修改其中一个节点的节点输出。

建议您在设计业务流程时，默认创建一个虚拟节点作为业务流程的根节点，来控制整个业务流程。设计业务流程的操作如下：

1.  双击业务流程名称进入开发面板，鼠标单击**虚拟节点**并拖拽至右侧的开发面板。
    
    ![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 2]
2.  在**新建节点**对话框中，输入**节点名称**为**start**，单击**提交**。
    
    > **注意** 节点名称必须是大小写字母、中文、数字、下划线（\_）以及小数点（.），且不能超过128个字符。
3.  以同样的操作新建**ODPS\_SQL**节点，命名为**insert\_data**。
4.  通过拖拽连线，设置**start**节点为**insert\_data**节点的上游节点。

![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_16_color_FFFFFF_t_70_g_se_x_16 1]

#### 配置虚拟节点的上游依赖 ####

在业务流程中，虚拟节点通常作为整个业务流程的控制器，是业务流程中所有节点的上游节点。

通常**使用工作空间根节点**作为虚拟节点**依赖的上游节点**：

1.  双击虚拟节点名称，进入节点的编辑页面。
2.  单击节点编辑页面右侧的**调度配置**。
3.  在**调度依赖**区域，单击**使用工作空间根节点**，设置虚拟节点的上游节点为工作空间根节点。
    
    ![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 3]
4.  单击工具栏中的![保存][8ede4a255a875d5f441197277f9925c8.png]图标。

#### 编辑和运行ODPS SQL节点 ####

本节将在ODPS\_SQL节点**insert\_data**中，通过SQL代码，查询不同学历的单身人士贷款买房的数量并保存结果，以便后续节点继续分析或展现。

1.  打开ODPS SQL节点的编辑页面，输入下述代码。
    
    具体语法说明请参见[SQL概述][SQL]
    
        INSERT OVERWRITE TABLE result_table  --插入数据至result_table中。
        SELECT education
            , COUNT(marital) AS num
        FROM bank_data
        WHERE housing = 'yes'
            AND marital = 'single'
        GROUP BY education
2.  右键单击代码中的**bank\_data**，选中**删除输入**。
    
    [建表并上传数据][Link 4]中创建的**bank\_data**表为非周期性调度产出的表，当有节点select该表数据时，需要手动删除通过select生成的自动解析配置结果（即@exclude\_input=bank\_data），以保障调度节点定时更新的表数据，通过节点调度依赖保障下游取数无误。
    
    ![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_16_color_FFFFFF_t_70_g_se_x_16 2]
3.  单击工具栏中的![保存][8ede4a255a875d5f441197277f9925c8.png]图标，防止代码丢失。
4.  单击![运行][eb3fb11bc685d7190eb9db4549f20ebf.png]图标。
    
    运行结束后，即可在页面下方查看运行日志和结果。

#### 提交业务流程 ####

1.  运行并调试ODPS\_SQL节点**insert\_data**后，返回业务流程页面。
2.  单击![提交][7426bcb031f5b4e83cb5a3ce1f2dcbdb.png]图标。
3.  在**提交**对话框中，选择需要提交的节点，输入**备注**，并选中**忽略输入输出不一致的告警**。
4.  单击**提交**。
    
    业务流程提交后，即可在**业务流程**下的节点列表查看节点提交状态。如果节点名称左侧存在![圆圈][46932de9b8eba0e732a2e474b3c7b47d.png]图标，表示该节点已提交；如果不存在![圆圈][46932de9b8eba0e732a2e474b3c7b47d.png]图标，表示该节点未提交。

### 创建同步任务 ###

#### 前提条件 ####

您需要首先通过RDS创建MySQL实例，获取RDS实例ID，并在RDS控制台添加白名单。详情请参见[创建RDS MySQL实例][RDS MySQL]。

> **说明** 如果是通过自定义资源组调度RDS的数据同步任务，必须把自定义资源组的机器IP也加入RDS的白名单中。

#### 背景信息 ####

在DataWorks中，通常通过数据集成功能，定期导入系统中产生的业务数据至工作区。SQL任务进行计算后，再定期导出计算结果至您指定的数据源中，以便进一步展示或运行使用。

![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_18_color_FFFFFF_t_70_g_se_x_16]

目前数据集成功能支持从RDS、MySQL、SQL Server、PostgreSQL、MaxCompute、OCS、DRDS、OSS、Oracle、FTP、DM、HDFS和MongoDB等数据源中，导入数据至工作空间或从工作空间导出数据。详细的数据源类型列表请参见[支持的数据源与读写插件][Link 5]。

#### 新增数据源 ####

> **说明** 仅项目管理员角色可以新建数据源，其它角色的成员仅支持查看数据源。

1.  进入**数据源管理**页面。
    
    1.  登录[DataWorks控制台][DataWorks]。
    2.  在左侧导航栏，单击**工作空间列表**。
    3.  选择工作空间所在地域后，单击相应工作空间后的**进入数据集成**。
    4.  在左侧导航栏，单击**数据源**，进入**工作空间管理 > 数据源管理**页面。
2.  在**数据源管理**页面，单击右上角的**新增数据源**。
3.  在**新增数据源**对话框中，选择数据源类型为**MySQL**。
4.  在**新增MySQL数据源**对话框，配置各项参数。
    
    此处以创建**阿里云实例模式**类型为例。
    
    ![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 4]

![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 5]

1.  在**数据集成**页签下，单击相应资源组后的**测试连通性**。
    
    数据同步时，一个任务只能使用一种资源组。您需要测试每种资源组的连通性，以保证同步任务使用的数据集成资源组能够与数据源连通，否则将无法正常执行数据同步任务。如果您需要同时测试多种资源组，请选中相应资源组后，单击**批量测试连通性**。详情请参见[数据源测试连通性][Link 6]。
2.  测试连通性通过后，单击**完成**。

#### 确认作为目标的MySQL数据库中有表 ####

在MySQL数据库中创建表**odps\_result**

CREATE TABLE `ODPS_RESULT` (
    `education`  varchar(255) NULL ,
    `num`  int(10) NULL 
    );

建表完成后，您可以执行`desc odps_result;`语句，查看表详情。

#### 新建并配置同步节点 ####

本节将新建一个同步节点**write\_result**并进行配置，目的是把表result\_table中的数据写入至自己的MySQL数据库中。具体操作如下：

1.  切换至**数据开发**面板，新建一个离线同步节点**write\_result**。
2.  设置**write\_result**节点的上游节点为**insert\_data**节点。
    
    ![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_16_color_FFFFFF_t_70_g_se_x_16 3]
3.  选择**数据源（ODPS > odps\_first）**、\*\*表（result\_table）\*\*为数据来源。
4.  选择您新建的MySQL数据源中的表（**odps\_result**）为数据去向。
    
    ![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 6]
5.  选择字段的映射关系，左侧的源头表字段和右侧的目标表字段为一一对应关系。
6.  在**通道控制**区域，配置作业速率上限和脏数据检查规则。

![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 7]

1.  预览保存。
    
    完成上述配置后，上下滚动鼠标即可查看任务配置。确认无误后，单击工具栏中的![保存][2e0cf6e28be0d86aa4da2c8ad61a6d94.png]图标。

#### 提交数据同步任务 ####

同步任务保存后，返回业务流程。单击工具栏中的![提交][9407e0016b8ecfcbb0d1ae6c506b500c.png]图标，提交同步任务至调度系统中。调度系统会根据配置的属性，从第二天开始自动定时执行。

### 配置调度和依赖属性 ###

#### 前提条件 ####

请确保您已创建任务**write\_result**，详情请参见[创建同步任务][Link 7]。

#### 配置调度属性 ####

1.  进入**数据开发**页面。
    
    1.  登录[DataWorks控制台][DataWorks]。
    2.  在左侧导航栏，单击**工作空间列表**。
    3.  选择工作空间所在地域后，单击相应工作空间后的**进入数据开发**。
2.  在相应的业务流程下，双击打开离线同步节点**write\_result**的编辑页面。
3.  单击编辑页面右侧的**调度配置**。
    
    > **说明** 手动业务流程中创建的节点需要手动触发，无法通过调度执行。
4.  在**时间属性**区域，配置节点的调度属性。

![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 8]

![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 9]

#### 配置依赖属性 ####

依赖属性中可以配置节点的上游依赖，表示即使当前节点的实例已经到定时时间，也必须等待上游节点的实例运行完毕，才会触发运行。

例如，当前节点的实例将在上游**insert\_data**节点的实例运行完毕后，才会触发执行。

在调度系统中，每一个工作空间中默认会创建一个**工作空间名称\_root**节点作为根节点。如果本节点没有上游节点，可以直接依赖根节点。

#### 提交节点 ####

1.  在**write\_result**节点的编辑页面，单击工具栏中的![保存][8f4711e6f75f7d09b3aac7b5de09a90f.png]图标。
2.  提交节点。
    
    > **注意** 您需要设置节点的**重跑属性**和**依赖的上游节点**，才可以提交节点。
    
    1.  单击工具栏中的![提交][111163186864fb9c5a252d3bc97a1c82.png]图标。
    2.  在**提交新版本**对话框中，输入**备注**。
    3.  单击**确认**。
    
    如果您使用的是标准模式的工作空间，提交成功后，请单击右上角的**发布**。具体操作请参见[发布任务][Link 8]。
    
    节点只有提交至调度系统中，才会从第二天开始，自动根据调度属性配置的周期，在各时间点生成实例，并定时运行。
    
    > **说明** 如果是23:30以后提交的节点，则调度系统从第3天开始，才会自动周期生成实例并定时运行。

### 运行及排错 ###

在设置周期和依赖的操作中，您配置了每周二凌晨2点执行离线同步节点。提交节点后，需要到第2天才能看到调度系统自动执行的结果。DataWorks为您提供测试运行、补数据和周期运行三种触发方式，帮助您确认实例运行的定时时间、相互依赖关系、数据结果产出是否符合预期。

> **说明** 手动触发和自动调度的调度系统与周期生成实例的规则一致：
> 
>  *  无论周期选择小时、分钟、日、月或周，节点在每一个日期都会生成对应的实例。
>  *  仅在指定日期的对应实例，会定时运行并生成运行日志。
>  *  非指定日期的对应实例不会实际运行，而是在满足运行条件时，将状态直接转换为成功，因此不会有运行日志生成。

#### 测试运行 ####

1.  单击当前页面左上角的图标，选择**全部产品 > 运维中心（工作流）**，进入**运维中心**页面。
2.  在左侧导航栏，单击**周期任务运维 > 周期任务**。
3.  单击相应节点列表后的**测试**。
4.  在**冒烟测试**对话框中，输入**冒烟测试名称**，并**选择业务日期**，单击**确定**。
5.  自动跳转至**测试实例**页面，单击相应的实例，即可在右侧查看实例DAG图。
    
    右键单击实例，您可以查看该实例的依赖关系和详细信息，并进行终止运行、重跑等具体操作。
    
    > **说明**
    > 
    >  *  测试运行是手动触发节点，只要到定时的时间，立即运行，自动忽略实例的上游依赖关系。
    >  *  根据前文所述的实例生成规则，配置为每周二凌晨2点运行的节点write\_result，测试运行时选择的业务日期是周一（业务日期=运行日期-1），实例会在2点真正运行。如果不是周一，则实例在2点转换为成功状态，且没有日志生成。

#### 补数据运行 ####

如果需要确认多个节点的定时情况和相互依赖关系，或者需要从某个根节点开始重新执行数据分析计算，您可以进行补数据操作。

1.  在**运维中心**页面，单击左侧导航栏中的**周期任务运维 > 周期任务**。
2.  单击相应节点列表后的**补数据 > 当前节点**。
3.  配置**补数据**对话框中的参数，单击**确定**。

![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 10]

1.  自动跳转至**补数据实例**页面，单击相应的实例，即可看到实例DAG图。
    
    右键单击实例，可以查看该实例的依赖关系和详细信息，并进行终止运行、重跑等具体操作。
    
    > **说明**
    > 
    >  *  补数据任务的实例依赖前一天，例如补2017-09-15到2017-09-18时间段内的任务，如果15号的实例运行失败了，则16号的实例也不会运行。
    >  *  根据前文所述的实例生成规则，配置为每周二凌晨2点运行的节点write\_result，补数据运行时选择的业务日期是周一（业务日期=运行日期-1），实例会在2点真正运行。如果不是周一，则实例在2点转换为成功状态，且没有日志生成。

#### 周期自动运行 ####

周期自动运行，由系统根据所有节点的调度配置自动触发，所以页面没有操作入口。您可以通过以下两种方式查看实例信息和运行日志：

*  在**运维中心**页面，单击左侧导航栏中的**周期任务运维 > 周期实例**，选择业务日期或运行日期等参数，搜索**write\_result**节点对应的实例后，右键查看实例信息和运行日志。
 *  选择**周期实例**页面中相应的节点实例并单击，即可看到实例DAG图。
    
    右键单击实例，可以查看该实例的依赖关系和详细信息并进行终止运行、重跑等具体操作。
    
    > **说明**
    > 
    >  *  如果上游节点未运行，下游节点也不会运行。
    >  *  如果节点的实例初始状态为未运行，当定时时间到达时，调度系统会检查该实例的全部上游实例是否运行成功。
    >  *  只有上游实例全部运行成功，且定时时间到达的实例，才会被触发运行。
    >  *  处于未运行状态的实例，请确认上游实例已经全部成功且已到定时时间。

### 使用临时查询快速查询SQL（可选） ###

如果您已经创建了DataWorks工作空间（MaxCompute项目），可以直接使用DataWorks临时查询功能，快速书写SQL语句操作MaxCompute。

**临时查询**的详情请参见[临时查询][Link 9]。

#### 进入临时查询 ####

1.  登录[DataWorks控制台][DataWorks]。
2.  在左侧导航栏，单击**工作空间列表**。
3.  选择工作空间所在地域后，单击相应工作空间后的**进入数据开发**。
4.  在左侧导航栏，单击**临时查询**。
5.  在**临时查询**面板，右键单击**临时查询**，选择**新建节点 > ODPS SQL**。
6.  在**新建节点**对话框中，输入**节点名称**，并选择**目标文件夹**。

> **说明** 节点名称的长度不能超过128个字符。

1.  单击**提交**。

#### 运行SQL ####

现在，您可以在新建的临时查询节点中运行MaxCompute支持的SQL语句，详情请参见[SQL概述][SQL]。

以运行一个DDL语句[新建表][Link 10]为例，输入建表语句，单击![运行][1078d7543aa2c0569ba597505234b65c.png]即可。

create table if not exists sale_detail
    (
    shop_name     string,
    customer_id   string,
    total_price   double
    )
    partitioned by (sale_date string,region string);
    -- 创建一张分区表sale_detail

您可以查看本次运行的费用预估，单击**运行**。

![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 11]

您可以在下方的日志窗口，查看运行情况和最终结果。如果本次运行成功，结果为**OK**。

您可以使用同样的方法执行[查询语句][Link 11]。

![请添加图片描述][watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 12]

[Link 1]: https://help.aliyun.com/document_detail/74246.htm#concept-rdn-pnp-r2b
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_16_color_FFFFFF_t_70_g_se_x_16]: https://img-blog.csdnimg.cn/32ee7971c3cf4eaa8ce3cdac6c069655.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_16,color_FFFFFF,t_70,g_se,x_16
[Link 2]: https://help.aliyun.com/document_detail/136938.htm#task-2481177
[db0ed185e50d9df4643032cb2e2ba05e.png]: https://img-blog.csdnimg.cn/img_convert/db0ed185e50d9df4643032cb2e2ba05e.png
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_15_color_FFFFFF_t_70_g_se_x_16]: https://img-blog.csdnimg.cn/f665262ba2ce442f869379b6e45d5014.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_15,color_FFFFFF,t_70,g_se,x_16
[Link 3]: https://help.aliyun.com/document_detail/27808.htm#concept-rkk-kcy-5db
[banking.txt]: https://docs-aliyun.cn-hangzhou.oss.aliyun-inc.com/cn/shujia/0.2.00/assets/pic/data-develop/banking.txt
[1f2869ab70fb8b68132c9165eadd9ca9.png]: https://img-blog.csdnimg.cn/img_convert/1f2869ab70fb8b68132c9165eadd9ca9.png
[c61a59f544324dde8a4f9644cc26f8e6.png]: https://img-blog.csdnimg.cn/c61a59f544324dde8a4f9644cc26f8e6.png
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16]: https://img-blog.csdnimg.cn/28e0dd96837b47bfa495e2adc8500c02.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_20,color_FFFFFF,t_70,g_se,x_16
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 1]: https://img-blog.csdnimg.cn/6f5df93facad49c195de07add67248c7.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_20,color_FFFFFF,t_70,g_se,x_16
[Link 4]: https://help.aliyun.com/document_detail/84670.htm#task-2363400
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 2]: https://img-blog.csdnimg.cn/55df4edadf66437097c040293839f1c7.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_20,color_FFFFFF,t_70,g_se,x_16
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_16_color_FFFFFF_t_70_g_se_x_16 1]: https://img-blog.csdnimg.cn/384241eace9d41f2b7beedf963e716ac.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_16,color_FFFFFF,t_70,g_se,x_16
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 3]: https://img-blog.csdnimg.cn/7ef050ea06074ec2bbf959fde3ca06aa.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_20,color_FFFFFF,t_70,g_se,x_16
[8ede4a255a875d5f441197277f9925c8.png]: https://img-blog.csdnimg.cn/img_convert/8ede4a255a875d5f441197277f9925c8.png
[SQL]: https://help.aliyun.com/document_detail/27860.htm#concept-awk-jmb-5db
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_16_color_FFFFFF_t_70_g_se_x_16 2]: https://img-blog.csdnimg.cn/a27fb188dbb844048237184aeaf8271c.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_16,color_FFFFFF,t_70,g_se,x_16
[eb3fb11bc685d7190eb9db4549f20ebf.png]: https://img-blog.csdnimg.cn/img_convert/eb3fb11bc685d7190eb9db4549f20ebf.png
[7426bcb031f5b4e83cb5a3ce1f2dcbdb.png]: https://img-blog.csdnimg.cn/img_convert/7426bcb031f5b4e83cb5a3ce1f2dcbdb.png
[46932de9b8eba0e732a2e474b3c7b47d.png]: https://img-blog.csdnimg.cn/img_convert/46932de9b8eba0e732a2e474b3c7b47d.png
[RDS MySQL]: https://help.aliyun.com/document_detail/26117.htm#concept-wzp-ncf-vdb
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_18_color_FFFFFF_t_70_g_se_x_16]: https://img-blog.csdnimg.cn/9ab0d03d6e1c4a98beb432d5ecf66d53.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_18,color_FFFFFF,t_70,g_se,x_16
[Link 5]: https://help.aliyun.com/document_detail/137670.htm#concept-uzy-hgv-42b
[DataWorks]: https://workbench.data.aliyun.com/console
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 4]: https://img-blog.csdnimg.cn/13be2d2be7ea474d8a045f8915962c4b.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_20,color_FFFFFF,t_70,g_se,x_16
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 5]: https://img-blog.csdnimg.cn/47be340b4ca54ffaac5608ac0740becf.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_20,color_FFFFFF,t_70,g_se,x_16
[Link 6]: https://help.aliyun.com/document_detail/137671.htm#concept-ovl-zgv-42b
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_16_color_FFFFFF_t_70_g_se_x_16 3]: https://img-blog.csdnimg.cn/f960cbb40deb46eb9988dc430aab6368.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_16,color_FFFFFF,t_70,g_se,x_16
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 6]: https://img-blog.csdnimg.cn/e9289e6c1033496785ddcca249b3c49d.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_20,color_FFFFFF,t_70,g_se,x_16
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 7]: https://img-blog.csdnimg.cn/96e200a0e58e4c88b09587f3d7f8200e.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_20,color_FFFFFF,t_70,g_se,x_16
[2e0cf6e28be0d86aa4da2c8ad61a6d94.png]: https://img-blog.csdnimg.cn/img_convert/2e0cf6e28be0d86aa4da2c8ad61a6d94.png
[9407e0016b8ecfcbb0d1ae6c506b500c.png]: https://img-blog.csdnimg.cn/img_convert/9407e0016b8ecfcbb0d1ae6c506b500c.png
[Link 7]: https://help.aliyun.com/document_detail/85555.htm#task-2349290
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 8]: https://img-blog.csdnimg.cn/59774d959ae54d69b59f1635feb84ae1.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_20,color_FFFFFF,t_70,g_se,x_16
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 9]: https://img-blog.csdnimg.cn/f2d97a3e55244b11afb22c54c982e58b.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_20,color_FFFFFF,t_70,g_se,x_16
[8f4711e6f75f7d09b3aac7b5de09a90f.png]: https://img-blog.csdnimg.cn/img_convert/8f4711e6f75f7d09b3aac7b5de09a90f.png
[111163186864fb9c5a252d3bc97a1c82.png]: https://img-blog.csdnimg.cn/img_convert/111163186864fb9c5a252d3bc97a1c82.png
[Link 8]: https://help.aliyun.com/document_detail/92402.htm#task-2470114
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 10]: https://img-blog.csdnimg.cn/24552a7bfd484a13b3b6a173a2a8510e.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_20,color_FFFFFF,t_70,g_se,x_16
[Link 9]: https://help.aliyun.com/document_detail/137564.htm#concept-lfk-lzf-q2b
[Link 10]: https://help.aliyun.com/document_detail/73768.htm#concept-l3j-w31-wdb
[1078d7543aa2c0569ba597505234b65c.png]: https://img-blog.csdnimg.cn/img_convert/1078d7543aa2c0569ba597505234b65c.png
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 11]: https://img-blog.csdnimg.cn/3748f5bf5d544ac599196bd10aeec847.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_20,color_FFFFFF,t_70,g_se,x_16
[Link 11]: https://help.aliyun.com/document_detail/73777.htm#concept-i1q-lkb-wdb
[watermark_type_ZHJvaWRzYW5zZmFsbGJhY2s_shadow_50_text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ_size_20_color_FFFFFF_t_70_g_se_x_16 12]: https://img-blog.csdnimg.cn/115e6a3074764920accc297df06a32aa.png?x-oss-process=image/watermark,type_ZHJvaWRzYW5zZmFsbGJhY2s,shadow_50,text_Q1NETiBA6IOc5Yip55qE5puZ5YWJ,size_20,color_FFFFFF,t_70,g_se,x_16