阿里云 odps 文档.pdf

阿里云ODPS文档 阿里云ODPS（Open Data Processing Service）是一种大规模数据处理服务，提供了基于SQL的数据处理能力。ODPS SQL是ODPS的一部分，提供了类似于SQL的语法，用于处理大规模数据。 ODPS SQL的特点 ODPS SQL采用的是类似于SQL的语法，可以看作是标准SQL的子集，但不能因此简单的把ODPS SQL等价成一个数据库，它在很多方面并不具备数据库的特征，如事务、主键约束、索引等。 ODPS SQL的应用场景 ODPS SQL适用于海量数据（TB级别），实时性要求不高的场合，它的每个作业的准备、提交等阶段要花费较长时间，因此要求每秒处理几千至数万笔事务的业务是不能用ODPS SQL完成的。 保留字 ODPS将SQL语句的关键字作为保留字。在对表、列或是分区命名时请不要使用，否则会报错。保留字不区分大小写。ODPS SQL保留字列表包括：%、&、&&、(、)、*、+、-、.、/、;、<、<=、<>、=、>、>=、?、ADD、ALL、ALTER、AND、AS、ASC、BETWEEN、BIGINT、BOOLEAN、BY、CASE、CAST、COLUMN、COMMENT、CREATE、DESC、DISTINCT、DISTRIBUTE、DOUBLE、DROP、ELSE、FALSE、FROM、FULL、GROUP、IF、IN、INSERT、INTO、IS、JOIN、LEFT、LIFECYCLE、LIKE、LIMIT、MAPJOIN、NOT、NULL、ON、OR、ORDER、OUTER、OVERWRITE、PARTITION、RENAME、REPLACE、RIGHT、RLIKE、SELECT、SORT、STRING、TABLE、THEN、TOUCH、TRUE、UNION、VIEW、WHEN、WHERE等。 分区表 ODPS在创建表时，允许用户指定表的某些列为分区列。指定分区表会对用户带来诸多便利，例如：提高SQL运行效率，减少计费等。在如下场景下使用分区表将会带来较大的收益：在select语句的where条件过滤中使用分区列作为过滤条件；与此同时，部分对分区操作的SQL的运行效率则较低，给您带来较高的计费，例如：使用输出到动态分区（DYNAMIC PARTITION）对部分ODPS操作命令，处理分区表和非分区表时的语法有差别，详细情况请参考DDL语句及DML语句部分的说明。 类型转换 ODPS SQL允许数据类型之间的转换，类型转换方式包括：显式类型转换及隐式类型转换。显式类型转换是用cast将一种数据类型的值转换为另一种类型的值的行为，在ODPS SQL中支持的显式类型转换包括：从double类型转为bigint类型时，小数部分会被截断，例如：cast(1.6 as bigint) = 1；满足double格式的string类型转换为bigint时，会先将string转换为double，再将double转换为bigint，因此，小数部分会被截断，例如：cast(“1.6” as bigint) = 1；满足bigint格式的string类型可以被转换为double类型，小数点后保留一位，例如：cast(“1”as double) = 1.0；不支持的显式类型转换会导致异常；如果在执行时转换失败，报错退出；日期类型转换时采用默认格式yyyy-mm-dd hh:mi:ss，详细说明信息请参考String类型与Datetime类型之间的转换；部分类型之间不可以通过显式的类型转换，但可以通过SQL内建函数进行转换，例如：从boolean类型转换到string类型，可使用函数to_char，详细介绍请参考TO_CHAR，而to_date函数同样支持从string类型到datetime类型的转换，详细介绍请参考TO_DATE ；关于cast的介绍请参阅CAST。 隐式类型转换是指在运行时，由ODPS依据上下文使用环境及类型转换规则自动进行的类型转换。ODPS支持的隐式类型转换规则与显式转换相同。