阿里云大数据开发治理平台 DataWorks开发ODPS SQL任务-云淘科技

SQL命令

MaxCompute的SQL命令使用类似标准SQL语法，支持DDL、DML、DQL语句，及MaxCompute的特定语法等命令，各SQL命令的详细语法要求及使用示例请参见SQL概述。下面以一个简单示例为您介绍SQL命令的开发及运行。

说明

• MaxCompute 2.0扩展函数使用到新数据类型时，您需要在该函数的SQL语句前加set odps.sql.type.system.odps2=true;，并与SQL一起提交运行，以便正常使用新数据类型。2.0数据类型详情请参见2.0数据类型版本。

• DataWorks提供调度参数，可实现调度场景下代码动态入参，您可在ODPS SQL节点中通过${变量名}的方式定义代码中的变量，并在调度配置 > 参数处，为该变量赋值。调度参数支持的格式，详情请参见调度参数支持的格式。

• 创建表

  您可使用CREATE TABLE语句创建非分区表、分区表、外部表及聚簇表，详情请参见CREATE TABLE。SQL示例如下：

  --创建一张分区表test1
  create table if not exists students
  ( id BIGINT,
    name STRING,
    age BIGINT,
    birth DATE)
  partitioned by (gender STRING); 

• 插入数据

  您可使用INSERT INTO或INSERT OVERWRITE语句向目标表中插入更新数据，详情请参见插入或覆写数据（INSERT INTO | INSERT OVERWRITE）。SQL示例如下：

  --插入数据
  INSERT INTO students partition(gender='boy') VALUES (1,'张三',15,DATE '2008-05-15') ;
  INSERT INTO students partition(gender='boy') VALUES (2,'李四',17,DATE '2006-07-20') ;
  INSERT INTO students partition(gender='girl') VALUES (3,'李霞',20,DATE '2003-04-20') ;
  INSERT INTO students partition(gender='girl') VALUES (4,'王兰',21,DATE '2002-01-08') ;
  INSERT INTO students partition(gender='boy') VALUES (5,'王五',17,DATE '2006-09-12') ;

  重要

  请尽量避免使用INSERT INTO语句插入数据，可能会造成不可预料的数据重复。推荐您使用INSERT OVERWRITE的方式，详情请参见插入或覆写数据。

• 查询数据

  您可使用SELECT语句实现嵌套查询、分组查询、排序等操作，详情请参考SELECT语法。SQL示例如下：

  --开启全表扫描，仅此Session有效
  set odps.sql.allow.fullscan=true; 
  
  --查询所有男生的信息，并按照ID进行升序排序
  select * from students where gender='boy' order by id;

  说明

  RAM用户默认没有生产表查询权限，生产表查询权限请前往安全中心申请，DataWorks上MaxCompute数据权限预设以及访问控制，详情请参见MaxCompute数据权限控制详情。MaxCompute命令授权详情请参见通过命令管理用户权限。

SQL函数

MaxCompute支持使用内建函数和自定义函数进行数据开发及分析，内建函数详情请参见内建函数概述，自定义函数详情请参见MaxCompute UDF概述。下面以一个简单示例为您介绍SQL函数的使用。

• 内建函数

  内建函数为MaxCompute自身预置的函数，您可以直接调用。基于上述示例，使用dateadd函数对birth列按照指定单位和幅度变化，命令示例如下：

  --开启全表扫描，仅此Session有效
  set odps.sql.allow.fullscan=true; 
  select id, name, age, birth, dateadd(birth,1,'mm') as birth_dateadd from students;

• 自定义函数（UDF）

  使用自定义函数时，您需要自行编写函数代码、上传为资源并注册函数，具体操作请参见创建并使用自定义函数。

运行及返回结果

• 运行结果会直接以电子表格的形式展示。您可以在DataWorks中执行操作，或者在电子表格中打开，也可以自由复制内容粘贴至本地Excel中，详情请参见任务调试流程。

  说明

  由于国际标准化组织发布的中国时区信息调整，通过DataWorks执行相关SQL时，日期显示某些时间段会存在时间差异：1900~1928年的日期时间差异5分52秒，1900年之前的日期时间差异9秒。

• 运行日志：您可以单击运行日志页签，查看Logview，详情请参见使用Logview 2.0查看作业运行信息。

• 返回结果：

  • 查询所有男生的信息，并按照ID进行升序排序。

    +------------+------------+------------+------------+------------+
    | id         | name       | age        | birth      | gender        |
    +------------+------------+------------+------------+------------+
    | 1          | 张三         | 15         | 2008-05-15 | boy        |
    | 2          | 李四         | 17         | 2006-07-20 | boy        |
    | 5          | 王五         | 17         | 2006-09-12 | boy        |
    +------------+------------+------------+------------+------------+

  • 对birth列按照指定单位和幅度变化。

    +------------+------------+------------+------------+---------------+
    | id         | name       | age        | birth      | birth_dateadd |
    +------------+------------+------------+------------+---------------+
    | 4          | 王兰         | 21         | 2002-01-08 | 2002-02-08    |
    | 3          | 李霞         | 20         | 2003-04-20 | 2003-05-20    |
    | 2          | 李四         | 17         | 2006-07-20 | 2006-08-20    |
    | 1          | 张三         | 15         | 2008-05-15 | 2008-06-15    |
    | 5          | 王五         | 17         | 2006-09-12 | 2006-10-12    |
    +------------+------------+------------+------------+---------------+

  您可在查询结果页针对指定字段执行排序操作，并对目标查询结果执行下载等相关操作，详情请参见处理查询结果。