Tablestore外部表计算 取当前Project当日使用按量付费标准版计算配额执行成功的计算Tablestore外部表的SQL任务输入量总和。Byte 公共云：用量×单价（0.03元/GB）。金融云：用量×单价（0.057元/GB）。Spark作业计算 取当前Project当日使用...
例如，运行如下SQL语句计算商品最近30天的访客数。select item_id-商品id,count(distinct visitor_id)as ipv_uv_1d_001 from 用户访问商品日志明细表 where ds${bdp.system.bizdate} and ds>=to_char(dateadd(to_date(${bdp.system.bizdate...
本文介绍定时SQL功能的常见问题。如何保证SQL分析的数据准确性？数据延迟写入或实例的调度配置不恰当时，可能发生数据分析不准确问题。数据写入存在延迟。例如数据写入日志服务延迟了5分钟，实例执行时间为12:03:00，SQL时间窗口为相对一...
SQL限流是限制数据库上执行SQL的并发度，通过限制问题SQL的并发度后，保障数据库正常响应业务请求，保障大部分的业务正常运转，即通过小部分业务受损，保障大部分业务正常运行。背景信息 随着技术的发展，尤其是云数据库的普及，数据库系统...
成本分析计费项名称取的是计量用量明细中的类型名称与费用中心详细账单中的名称不同，对应关系如下：成本分析计费项名称 费用中心详单计费项名称 费用中心详单计费项code ComputationSql SQL作业计算 SpotSQL作业计算 odps_computation ...
CURRENT_TIMESTAMP函数为MaxCompute 2.0扩展函数，支持获取数据库服务器当前TIMESTAMP类型的时间。命令格式 timestamp current_timestamp...相关函数 CURRENT_TIMESTAMP函数属于日期函数，更多日期计算、日期转换的相关函数请参见 日期函数。
本文介绍使用Lindorm计算引擎SQL语句访问数据库的数据时，需要提前了解的相关内容。了解开源Spark SQL 通过开源Spark SQL访问数据库的数据分为以下三个级别：Catalog：用来标识用户不同的数据源。Namespace：与数据库中的Database或者...
获取当前系统时间。使用东八区时间作为MaxCompute标准时间。命令格式 datetime getdate()返回值说明 返回当前日期和时间，DATETIME类型。...相关函数 GETDATE函数属于日期函数，更多日期计算、日期转换的相关函数请参见 日期函数。
例如，外部表参与计算的SQL。此功能仅为费用预估，实际费用以最终出账为准。成本预估实践 成本预估实践为您提供了一些成本预估的案例和技巧，您可以根据实际情况，参考案例选择最经济的付费方式。处理1 TB数据的付费方式。经过相关测试，...
常用命令列表 开发作业 MaxCompute支持多种计算模型SQL、SQLML、PyODPS、MapReduce、Spark、Mars、Graph，满足多样化开发需求。MaxCompute支持外部表功能，旨在提供处理除MaxCompute内部表以外的其他数据的能力。此外，MaxCompute还支持SDK...
概述 本文通过介绍参数SQL的写法，在仪表板制作时，生成取数SQL的逻辑等方面，介绍参数SQL应该如何写，以便在应用过程可以更灵活，更高效。关于参数SQL的创建入口，以及查询条件与参数字段关联方法。应用场景 如果某些要展示的数据无法从已...
数据集是基于特定数据库和特定SQL查询所产生的，以二维表表现的数据集合。本文介绍创建数据集的方法。创建数据集 登录 数据管理DMS 5.0。在顶部菜单栏中，选择 传输与加工>数据可视化。说明 更多访问方式，请参见 访问数据可视化功能。在 ...
例如，某SQL分析任务输出的自定义存储表已成为某数据API的数据来源，在调度生效日期未到达前，该任务下线并被删除后，对应的API将无法用于查询停止调度以后的数据。操作步骤 在 SQL数据服务工作台 顶部工具栏的右上角，单击 发布执行。在 ...
数据集是基于特定数据库和SQL查询生成，并且以二维表呈现的一种数据集合。本文介绍创建、编辑、删除数据集的方法。注意事项 数据分析后续所有的分析工作、仪表盘制作和大屏制作都是基于数据集进行的，因此在进行其他功能前，必须先创建数据...
日期与时间函数 支持处理DATE、DATETIME、TIMESTAMP等日期类型数据，实现加减日期、计算日期差值、提取日期字段、获取当前时间、转换日期格式等业务处理能力。数学函数 支持处理BIGINT、DOUBLE、DECIMAL、FLOAT等数值类型数据，实现转换进...
附录：日期时间计算表达式 为本地变量赋值时,如果需要针对日期时间进行运算，Dataphin支持以下快捷日期计算操作符：Dataphin 提供基于两个日期时间的运算 基于业务日期${bizdate} 的方式：${(yyyyMMdd|yyyy/MM/dd|yyyy-MM-dd)(+|-)n}。...
附录：日期时间计算表达式 为本地变量赋值时,如果需要针对日期时间进行运算，Dataphin支持以下快捷日期计算操作符：Dataphin 提供基于两个日期时间的运算 基于业务日期${bizdate} 的方式：${(yyyyMMdd|yyyy/MM/dd|yyyy-MM-dd)(+|-)n}。...
权限说明 仅支持 超级管理员、项目管理员 和 开发者 创建BLINK_SQL计算任务。步骤一：新建BLINK_SQL任务 在Dataphin首页，单击顶部菜单栏 研发。按照下图操作指引，进入 新建BLINK_SQL 对话框。在 新建BLINK_SQL 对话框，配置参数。参数 ...
权限说明 仅支持 超级管理员、项目管理员 和 开发者 创建BLINK_SQL计算任务。步骤一：新建BLINK_SQL任务 在Dataphin首页，单击顶部菜单栏 研发。按照下图操作指引，进入 新建BLINK_SQL 对话框。在 新建BLINK_SQL 对话框，配置参数。参数 ...
权限说明 仅支持 超级管理员、项目管理员 和 开发者 创建FLINK_SQL计算任务。步骤一：新建 FLINK_SQL 任务 在Dataphin首页，单击顶部菜单栏 研发。按照下图操作指引，进入 新建Flink_SQL任务 对话框。在 新建Flink_SQL任务 对话框，配置...
权限说明 仅支持 超级管理员、项目管理员 和 开发者 创建FLINK_SQL计算任务。步骤一：新建 FLINK_SQL 任务 在Dataphin首页，单击顶部菜单栏 研发。按照下图操作指引，进入 新建FLINK_SQL任务 对话框。在 新建FLINK_SQL任务 对话框，配置...
权限说明 仅支持 超级管理员、项目管理员 和 开发者 创建FLINK_SQL计算任务。步骤一：新建 FLINK_SQL 任务 在Dataphin首页，单击顶部菜单栏 研发。按照下图操作指引，进入 新建FLINK_SQL任务 对话框。在 新建FLINK_SQL任务 对话框，配置...
权限说明 仅支持 超级管理员、项目管理员 和 开发者 创建FLINK_SQL计算任务。步骤一：新建 FLINK_SQL 任务 在Dataphin首页，单击顶部菜单栏 研发。按照下图操作指引，进入 新建Flink_SQL任务 对话框。在 新建Flink_SQL任务 对话框，配置...
物联网数据分析的数据开发任务是使用标准的SQL语句对设备进行数据分析，而API服务可将数据开发任务封装成API，方便开发者调用。API服务既可以直接响应设备端请求，也可以用于服务端数据对接。创建数据分析任务 登录数据分析控制台，单击 ...
SQL作业计算成本控制 对于SQL计算作业，大部分费用较高的SQL都是由全表扫描引起的。另外，调度频繁也会引起SQL作业费用的增加，调度频繁可能会产生任务的堆积，在后付费的情况下会造成排队现象，如果任务多又出现了排队，那么第二天的账单...
说明 一次标准版SQL计算费用=计算输入数据量×SQL复杂度×单价（0.3元/GB）一次SpotSQL计算费用=计算输入数据量×SQL复杂度×单价（0.1元/GB）通过Excel分析：分析 用量明细 中数据分类为 ComputationSql 的数据。对SQL作业费用进行排序，...
弹性强度从可用区、地域和套餐三个维度进行计算，将实例规格的强度分为优、中、差三个级别。弹性强度级别对应分值如下表所示。弹性强度 分值范围 说明 优 分数≥3 选择的实例规格当前库存和后续供应充足，在部署服务实例时，部署的成功率高...
环比计算时报错提示“Contrast query can only contain same level filter.”进行同环比计算时，若有查询条件，查询条件中选择的日期维度需要和进行计算的维度是同一个级别的，例如计算的是周环比则查询条件中需选择Week字段进行筛选查询。...
在普通的SQL组件基础上增加了 多日期循环执行 功能，用于并行执行某段时间内 天级别 SQL任务。例如在推荐场景中，并行执行过去7天的行为数据特征提取SQL补数据任务。使用限制 仅支持天级别的补数据循环。在使用时按照需要打开或关闭多日期...
函数类型 说明 日期与时间函数 支持处理DATE、DATETIME、TIMESTAMP等日期类型数据，实现加减日期、计算日期差值、提取日期字段、获取当前时间、转换日期格式等业务处理能力。数学函数 支持处理BIGINT、DOUBLE、DECIMAL、FLOAT等数值类型...
查看指定日期内AnalyticDB MySQL版集群下的SQL模板详情。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在...
支持通过SQL定义临时UDF，即在SQL脚本模式中定义好此UDF后，函数不会注册至MaxCompute的函数列表中，仅支持在当前定义UDF的SQL脚本中直接调用，其他环境无法调用此UDF，详情请参见下文的 定义SQL UDF：创建临时SQL UDF。使用SQL定义UDF时，...
SQL洞察信息说明 执行耗时分布：展示了选定时间范围内，所有SQL的执行耗时分布，将执行耗时分为了7个区间，每分钟计算一次，分别是：[0,1]ms 是指满足0ms≤执行耗时≤1ms SQL执行次数占比。（1,2]ms 是指1ms<执行耗时≤2ms SQL执行次数占比...
2021-08-31 全部地域 复杂类型函数 日期与时间函数 字符串函数 数学函数 其他函数 MaxCompute SQL UPDATE、DELETE和MERGE INTO功能商业化 自2021年8月10日起，MaxCompute SQL的UPDATE、DELETE和MERGE INTO功能结束免费公测，开始正式计费。...
计算指定数值列的方差。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您用到的函数涉及新数据类型（TINYINT、SMALLINT、INT、FLOAT、VARCHAR、TIMESTAMP或BINARY），在使用扩展函数时，需要执行如下语句开启新数据类型开关：...
说明 执行耗时分布：执行耗时分布 展示了选定时间范围内，所有SQL的执行耗时分布，将执行耗时分为了7个区间，每分钟计算一次，分别是：[0,1]ms 是指满足0ms≤执行耗时≤1ms SQL执行次数占比（1,2]ms 是指1ms<执行耗时≤2ms SQL执行次数占比...
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。命令格式 bigint bitwise_or_agg(bigint value)参数说明 value：必填。BIGINT类型的值，NULL值不参与计算。...
在同一条SQL语句中同时使用多个聚合函数时，如果项目资源不足，会出现内存溢出问题，请您根据实际业务情况优化SQL或购买计算资源。命令格式 bigint bitwise_and_agg(bigint value)参数说明 value：必填。BIGINT类型的值，NULL值不参与计算...
计算时数量的计算规则如下：计算时数量=max(CPU Core数量×时长,内存×时长/4)例如1小时消耗了2 个CPU Core和5 GB内存，则计算时数量为：计算时数量=max(2×1,5×1/4)=2 账单金额为：账单金额=计算时数量×单价 本例中账单金额为：2（计算...
当您需要了解数据值的波动或分布情况时，MaxCompute支持使用VAR_SAMP函数计算指定数值列的样本方差，帮助您从数据中提取出更深层次的价值。此函数为MaxCompute 2.0扩展函数。注意事项 升级到MaxCompute 2.0后，产品扩展了部分函数。如果您...