全部产品
Search
文档中心

云原生大数据计算服务 MaxCompute:2020年

更新时间:Dec 21, 2023

本文为您介绍了MaxCompute 2020年内容更新的最新动态,基于此您可以了解MaxCompute中增加了哪些新功能、语法新特性和权限变更,提升项目开发效率。

2020年12月更新记录

时间

特性

类别

描述

产品文档

2020-12-21

新增STACK和GET_USER_ID函数。

新说明

新增STACK函数用于将指定的数据分隔为指定列数。新增GET_USER_ID函数用于获取当前账号的账号ID。

其他函数

2020-12-21

新建MaxCompute项目默认提供Information Schema服务。

更新说明

新建MaxCompute项目默认提供Information Schema服务,无需手动安装Information Schema权限包。

项目级别Information Schema

2020-12-15

新增Mars版本变更说明。

新说明

提供Mars各版本的变更记录。

Mars版本更新记录

2020-12-15

新增Java SDK版本变更说明。

新说明

提供Java各版本的变更记录。

Java SDK版本更新记录

2020-12-15

新增JDBC版本变更说明。

新说明

提供JDBC各版本的变更记录。

JDBC版本更新记录

2020-12-11

元数据视图列表新增TASK视图。

新说明

TASK视图用于保存运行中作业的实时快照信息。

元数据视图列表

2020-12-10

新增添加项目空间成员并设置角色操作指导。

新说明

如果您使用阿里云账号创建了项目空间,需要RAM用户协助开发时,可以将RAM用户添加为项目空间成员并设置角色,RAM用户才可以协同开发。

授权给其他用户

2020-12-09

新增AdminEvent事件。

新说明

新增CreateProject、UpdateProject、DeleteProject事件,记录项目相关日志。

审计日志

2020-12-08

常用命令整改并优化内容。

更新说明

调整常用命令内容并完善命令示例。

常用命令列表

2020-12-08

Insert语句整改并优化内容。

更新说明

调整Insert语句内容并完善命令示例。

2020年11月更新记录

时间

特性

类别

描述

产品文档

2020-11-30

补充国际站的公开数据集信息。

更新说明

补充国际站的公开数据集信息,供测试、试用产品。

公开数据集概述

2020-11-30

新增查询编辑器。

新功能

MaxCompute控制台提供查询编辑器,方便您快速执行SQL语句并进行数据分析操作。

使用DataWorks连接

2020-11-27

更新升级和降配操作流程。

更新说明

通过新版MaxCompute控制台执行升级和降配操作。

升级和降配

2020-11-26

刷新审计日志字段内容。

更新说明

刷新审计日志字段内容。

审计日志

2020-11-20

支持解除order by必须带limit的限制。

新说明

支持解除order by必须带limit的限制。

SELECT语法

2020-11-17

新增Python UDF使用第三方包操作指导。

新说明

MaxCompute支持您在Python UDF中引用第三方包,例如NumPy包、需要编译的第三方包或依赖动态链接库的第三方包。

UDF示例:Python UDF使用第三方包

2020-11-04

补充配置JDBC启用MCQA功能下的可选配置参数。

更新说明

补充配置JDBC启用MCQA功能下的可选配置参数。

使用说明

2020年10月更新记录

时间

特性

类别

描述

产品文档

2020-10-30

SEMI JOIN支持MAPJOIN Hint。

更新说明

SEMI JOIN支持MAPJOIN Hint,提高LEFT SEMI或ANTI JOIN的性能,为数据倾斜问题提供解决方案。

SEMI JOIN(半连接)

2020-10-30

MaxCompute支持SORT BY不带 DISTRIBUTE BY。

更新说明

MaxCompute支持不带DISTRIBUTE BY的SORT BY,提供数据重排的解决方案,提高SQL执行的过滤性能。

SELECT语法

2020-10-30

INSERT命令支持ZORDER BY子句,提升查询时的过滤性能。

新功能

支持把数据相近的行排列在一起,提升查询时的过滤性能,同时降低存储成本。

插入或覆写数据(INSERT INTO | INSERT OVERWRITE)

2020-10-30

支持通过条件筛选方式批量删除分区。

新功能

如果用户希望一次性删除符合某个规则条件的一个或多个分区,可以使用条件表达式匹配分区进行批量删除。

分区和列操作

2020-10-30

OSS外部表CSV或TSV文件支持GBK编码格式。

更新说明

odps.text.option.encoding属性支持GBK编码格式。

创建OSS外部表

2020-10-30

时间函数YEAR/QUARTER/MONTH/DAY/HOUR/MINUTE/SECOND增加对DATETIME输入数据类型的支持。

更新说明

时间函数YEAR/QUARTER/MONTH/DAY/HOUR/MINUTE/SECOND增加对DATETIME输入数据类型的支持。

日期与时间函数

2020-10-30

新增WIDTH_BUCKET函数。

新功能

支持获取某个字段值落入的分组编号。

数学函数

2020-10-12

查询加速(MCQA)功能商业化。

更新说明

查询加速(MCQA)功能商业化,正式开始收费。

MCQA概述

2020-10-10

支持修改表的聚簇属性。

新说明

新增修改表的聚簇属性说明。

表操作

2020年9月更新记录

时间

特性

类别

描述

产品文档

2020-09-24

新增PyODPS模块。

新说明

新增PyODPS类型作业说明。

PyODPS

2020-09-17

新增创建RAM用户描述。

新说明

新增创建RAM用户描述。

准备RAM用户

2020-09-08

新增LOAD命令说明。

新说明

新增LOAD命令说明。

LOAD

2020-09-03

更新Tunnel Upload说明。

更新说明

更新Tunnel Upload命令使用说明。

Tunnel命令

2020-09-01

新增BigQuery数据迁移至MaxCompute最佳实践。

新实践

为您介绍如何将BigQuery数据迁移至MaxCompute。

BigQuery数据迁移至MaxCompute

2020-09-01

新增Amazon Redshift数据迁移至MaxCompute最佳实践。

新实践

为您介绍如何将Amazon Redshift数据迁移至MaxCompute。

Amazon Redshift数据迁移至MaxCompute

2020年8月更新记录

时间

特性

类别

描述

产品文档

2020-08-07

新增成本优化最佳实践。

新实践

为您介绍如何优化计算、存储和数据上传下载成本。

成本优化

2020-08-06

新增MaxCompute项目设置RAM子账号为超级管理员最佳实践。

新实践

为您介绍如何在MaxCompute项目空间中将RAM用户设置为超级管理员,并提供了超级管理员在成员管理和权限管理等方面的使用建议。

MaxCompute项目设置RAM子账号为超级管理员

2020-08-05

新增PyODPS节点实现结巴中文分词最佳实践。

新实践

为您介绍如何使用DataWorks的PyODPS类型节点,借助开源结巴中文分词包实现对中文字段的分词并写入新的表,以及如何利用闭包函数使用自定义词典进行分词。

PyODPS节点实现结巴中文分词

2020-08-05

新增实现指定用户访问特定UDF最佳实践。

新实践

为您介绍如何实现将资源(表或UDF)设设置为仅能被指定的用户访问。

实现指定用户访问特定UDF

2020-08-05

新增迁移Oracle数据至MaxCompute最佳实践。

新实践

为您介绍如何通过DataWorks数据集成,迁移Oracle上的数据至MaxCompute。

迁移Oracle数据至MaxCompute

2020-08-05

新增迁移ECS自建MySQL数据库至MaxCompute最佳实践。

新实践

为您介绍如何使用独享数据集成资源,将您在ECS上自建的MySQL数据库中的数据,迁移至MaxCompute。

迁移ECS自建MySQL数据库至MaxCompute

2020-08-05

新增SERDEPROPERTIES支持的属性项odps.text.option.use.quote

新说明

指定是否识别CSV的列分隔符"

创建OSS外部表

2020年7月更新记录

时间

特性

类别

描述

产品文档

2020-07-29

新增迁移MaxCompute数据至OTS最佳实践。

新实践

为您介绍如何将MaxCompute数据迁移至表格存储OTS。

MaxCompute数据迁移至OTS

2020-07-29

新增迁移MaxCompute数据至OSS最佳实践。

新实践

为您介绍如何使用DataWorks的数据同步功能将MaxCompute数据迁移至对象存储OSS。

MaxCompute数据迁移至OSS

2020-07-24

新增数据加密功能。

新功能

MaxCompute支持通过密钥管理服务KMS(Key Management Service)对数据进行加密存储,提供数据静态保护能力,满足企业监管和安全合规需求。

存储加密

2020-07-23

新增聚合函数。

新说明

新增APPROX_DISTINCTANY_VALUEARG_MAXARG_MIN函数。

聚合函数

2020-07-23

Python UDF增加支持的数据类型。

新说明

Python UDF增加支持的数据类型。

2020-07-23

新增SQL语言定义函数。

新功能

MaxCompute支持通过SQL语言定义函数(SQL Function)在SQL脚本中使用SQL定义的UDF。

UDF(SQL自定义函数)

2020-07-23

新增代码嵌入式UDF。

新功能

MaxCompute支持通过代码嵌入式UDF(Embedded UDF)将Java或Python代码嵌入SQL脚本。

2020-07-20

新增审计日志功能。

新功能

为您介绍审计日志的功能、使用场景、范围以及字段定义。

审计日志

2020-07-15

新增通过Tunnel迁移日志数据至MaxCompute。

新实践

为您介绍如何通过Tunnel上传日志数据至MaxCompute。

通过Tunnel迁移日志数据至MaxCompute

2020-07-15

新增通过DataHub迁移日志数据至MaxCompute最佳实践。

新实践

为您介绍如何通过DataHub迁移日志数据至MaxCompute。

通过DataHub迁移日志数据至MaxCompute

2020-07-15

新增通过DataWorks数据集成迁移日志数据至MaxCompute最佳实践。

新实践

为您介绍如何通过数据集成功能同步LogHub数据至MaxCompute。

通过DataWorks数据集成迁移日志数据至MaxCompute

2020-07-08

新增CLONE TABLE功能。

新功能

MaxCompute提供了CLONE TABLE功能,支持将表数据复制到另一个表中,让数据移动和复制更便捷。

CLONE TABLE

2020年6月更新记录

时间

特性

类别

描述

产品文档

2020-06-03

新增Tunnel overwrite命令。

新说明

支持Tunnel overwrite命令。

Tunnel命令

2020-06-01

优化Spark访问VPC实例。

新说明和示例

新增内容如下:

  • Spark访问VPC的白名单和地域的限制说明。

  • Spark访问不同实例时,合并JSON文本的结果示例。

Spark访问VPC实例

2020-06-01

Policy和Download权限控制。

新示例

新增Policy授权和撤销的用法示例。

Policy权限控制

2020年1月更新记录

时间

特性

类别

描述

产品文档

2020-01-14

SQL兼容性升级。

新说明

get_idcard_ageconcat_wslike函数行为变更说明。

2020-01-09

新增参数说明。

新说明

对示例中的参数进行详细的说明。

数据保护机制