本文介绍RDS MySQL如何结合大数据计算服务MaxCompute使用。开放数据处理服务又称为大数据计算服务（MaxCompute，原名ODPS），可服务于批量结构化数据的存储和计算，提供海量数据仓库解决方案以及针对大数据的分析建模服务。通过 数据集成 ...
配置数据计算 您可以配置表达式，预处理上一节点输出字段的数据。进入数据解析工作台。在中间画布单击当前节点后的添加 图标。在弹出的节点列表中单击 数据计算 节点。在画布中单击 数据计算 节点，在右侧配置面板，显示原始字段列表。根据...
概述 Quick BI中的指标趋势图中选择阶段汇总数据后日环比数据计算逻辑。详细信息 Quick BI中的指标趋势图中选择阶段汇总数据后日环比数据计算逻辑。比如是11.04~11.07号的数据，然后是日环比，下面明细每天的是跟前一天比，11.04和11.03比...
产品名称 QuickAudience 产品模块 QuickAudience 概述 AIPL模型用于统计用户对某一事物的喜好程度，根据每天不同的喜好程度，每天给该用户打一次标记，每天只计算一次数据，当天如果数据有变动，不会立即更新模型数据。问题描述 AIPL模型...
概述 本文主要描述了Quick BI的即席分析拖入字段会触发计算，数据量大的情况下需要等待很久，如何将各个字段配置完以后再触发计算的方法。详细信息 可以先切换到模型，将字段都拖拽好以后。再切换到数据，这样就只有一次取数了。适用于 ...
当您需要将某个Prometheus实例的数据导出，进行自定义业务处理时，可以使用Prometheus数据投递功能，将Prometheus实例数据投递至大数据计算服务MaxCompute处理。MaxCompute能帮助您结合其他的数据源执行大数据计算服务，加工后用于报表分析...
当您需要将某个Prometheus实例的数据导出，进行自定义业务处理时，可以使用Prometheus数据投递功能，将Prometheus实例数据投递至大数据计算服务MaxCompute处理。MaxCompute能帮助您结合其他的数据源执行大数据计算服务，加工后用于报表分析...
全密态数据库可以用于多方数据融合计算，支持数据所有者授权第三方使用数据参与计算，实现联合营销等多种场景。场景介绍 以某数据平台公司业务场景为例，该平台通过合法渠道，经用户授权后，收集了用户信息，生成用户画像表（portrait），...
全密态数据库可以用于多方数据融合计算，支持数据所有者授权第三方使用数据参与计算，实现联合营销等多种场景。场景介绍 以某数据平台公司业务场景为例，该平台通过合法渠道，经用户授权后，收集了用户信息，生成用户画像表（portrait），...
问题描述 Quick BI饼图计算的总数和数据源计算出的总数不一致。问题原因 饼图的总数是根据前端各分项的和来计算，但是有的分项因为是负数在前端无法展示造成的计算差异。解决方案 对于分组汇总有负数的场景可以切换其他图表如指标看板等...
背景信息 Python作为目前机器学习、AI模型开发的主流编程语言，提供了如NumPy、SciPy、Scikit-Learn、Matplotlib等丰富的科学计算、可视化库，用于数据科学和数据分析。同时支持TensorFlow、PyTorch、XGBoost、LightGBM等丰富的训练框架。...
订阅DataHub数据进行实时计算，插入到RDS实例的目标表中。在RDS数据库中，按照源表结构创建相应的表。参考 数据存储配置白名单，配置RDS数据库白名单。由于本案例的RDS数据库位于华东1区，而流计算项目位于华东2区，所以需要在RDS数据库中...
问题描述 Quick BI新交叉表添加累计计算后数据为横杠（-）。问题原因 加了累计计算之后会走一个比较复杂的查询，需要用户数据库排序和Java内存排序一致。解决方案 给任意一个度量字段加上组内排序即可。适用于 Quick BI 公共云专业版
将数据写入到表格存储时，您可以通过函数计算对新增的数据做简单的清洗，将清洗后的数据写回到表格存储的另一种数据表中。同时，您也可以实时访问表格存储中的原始数据和结果数据。样例场景 假设写入表格存储的为日志数据，且日志数据包括...
解决方案 客户选择云数据库Lindorm SQL（Phoenix）服务+数据湖Spark服务构建实时计算和数据仓库解决方案。Lindorm SQL提供在线查询能力、Spark提供流式处理、复杂分析等能力来满足业务需求；梳理业务数据，对数据进行分层存储在Lindorm SQL...
问题描述 Quick BI中数据集报错信息如下所示，数据集中有使用了新建计算字段，错误提示有语法错误。问题原因 新建计算字段的表达式中使用了%，目前不支持这样的计算格式。解决方案 1.将表示式中的%换算成小数形式，如0.005，再参与计算。2....
问题描述 用户使用SQL Server数据源创建数据集，在创建计算字段的时候，需要两列相除，发现结果精度丢失。问题原因 用户两列字段类型不一致，隐式转换导致的精度丢失。例如一列为整形，一列为小数。解决方案 例如A列除以B列，A列为小数，...
处理 数据计算 根据 源节点 配置，自动匹配显示相关字段数据。您可通过配置表达式，计算已有字段数据，来生成新字段数据。数据过滤 配置过滤条件，指定只输出满足特定条件的数据。值转化 配置判断条件，将解析任务中流转消息的某个字段的值...
问题描述 Quick BI在MySQL数据源的数据集中计算字段使用PERIOD_DIFF函数结果不符合预期不是相差月数。问题原因 函数参数格式传递错误。解决方案 PERIOD_DIFF函数需要传入的两个参数格式要求是：YYMM或YYYYMM。按要求传递后即可正常计算相差...
准备数据源 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源，各模块支持对接的数据源类型及操作指导，请参见 Dataphin支持的数据源。重要 确定业务数据源类型后，在Dataphin创建...
准备数据源 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源，各模块支持对接的数据源类型及操作指导，请参见 Dataphin支持的数据源。重要 确定业务数据源类型后，在Dataphin创建...
问题描述 在个人空间探索空间上传Excel作为数据源之后，使用两个整数来计算百分比的时候部分情况出现无法显示百分比的小数，始终显示整数0。问题原因 出现这个问题的原因是两个整数进行除法计算百分比之后当做部分数据库当做整数处理导致...
当您需要构建一个日志检索系统时，可通过实时计算Flink对日志数据进行计算后，输出到Elasticsearch进行搜索。本文以阿里云日志服务SLS（Log Service）为例，为您介绍具体的实现方法。前提条件 您已完成以下操作：开通阿里云实时计算服务并...
问题描述 Quick BI Hologres数据源类型的数据集添加计算字段转为浮点后缀提示“计算字段表达式解析错误”，表现如下：问题原因 将其他数据集计算字段的公式复制到新的数据集中未修改其中引用的字段，字段不存在导致的报错。解决方案 将计算...
问题描述 Quick BI Hologres数据源类型的数据集添加计算字段计算后实际有小数但是结果都是整数。问题原因 计算字段中除法计算的两个数字都是整数计算后结果也是整数。解决方案 将其中一个字段转为浮点型即可。适用于 Quick BI 当前环境：...
问题描述 Quick BI数据集新建计算字段被二次引用后保存数据集报错。INTERNAL:java.lang.RuntimeException:SQL execute error by datasource.java.sql.SQLException:Invalid use of group function ...
依托阿里云函数计算服务，日志服务提供流式数据加工服务。您可以通过配置一个函数计算触发器任务，定时获取更新的数据并触发函数的执行，进而增量消费日志服务Logstore的数据，并完成自定义加工任务。日志服务提供的函数模板或者用户自定义...
您可以使用规则引擎数据流转，将数据转发至函数计算（FC）中，然后由函数计算运行函数脚本进行业务处理。前提条件 已创建函数计算的服务和函数，并完成函数配置，验证函数能正常执行。函数计算使用方法，请参见 函数计算文档。重要 创建...
问题描述 在Quick BI的数据集中新建计算字段两个时间戳的差值，报错信息“数据预览失败”。问题原因 新建计算字段中SQL代码错误。解决方案 计算两个时间戳的差值应该使用 DATEDIFF（d1,d2）函数，结果以天为单位。适用于 Quick BI 数据集
您可以使用规则引擎数据流转，将数据转发至函数计算（FC）中，然后由函数计算运行函数脚本进行业务处理。本文以物模型数据上报Topic为例，介绍流转消息数据的完整流程。前提条件 已确认当前物联网平台实例及所在地域支持将数据转发到函数...
背景信息 消息数据清洗任务提供基本的算子能力，底层逻辑使用函数计算。云消息队列 RocketMQ 版 消息数据清洗任务创建完成后，您可以登录 函数计算，进行代码自定义及相应函数配置的修改。算子 算子能力说明 消息过滤 按照正则表达式匹配...
概述 本文描述Quick BI数据集新建计算字段的标识区分规则。详细信息 对于各类型计算字段的标识，可参见下图进行区分：适用于 Quick BI
问题描述 Quick BI数据集中新建计算字段无法引用已经创建的计算字段。已经创建的计算字段在度量中不显示。问题原因 1.计算字段引用层级不能超过5层；2.计算字段引用不能形成环。解决方案 计算字段引用层级控制在5层以内。适用于 Quick BI
背景信息 消息数据清洗任务提供基本的算子能力，底层逻辑使用函数计算。云消息队列 RocketMQ 版 消息数据清洗任务创建完成后，您可以登录 函数计算控制台，进行代码自定义及相应函数配置的修改。算子 算子能力说明 消息过滤 按照正则表达式...
问题描述 Quick BI数据集中如何...解决方案 根据数据集连接使用的数据库不同，可以使用对应数据库的日期函数处理计算，例如MySQL数据库的话，可以做如下处理计算获取到2020年2月份的天数值：适用于 Quick BI 基于公共云专业版4.4.1环境验证
问题描述 数据集添加计算列两个字段相减提示 BIGINT UNSIGNED value is out of range。问题原因 MySQL当两个字段相减时，如果其中一个或两个字段的类型的unsigned无符号类型，如果相减的值小于0则会报错提示 BIGINT UNSIGNED value is out ...
问题描述 数据集新建计算字段，保存报错“计算字段（维度）不能包含sum、avg、count、countd、max、min等聚合函数”。问题原因 计算字段数据类型为维度时，不能使用SUM、AVG、COUNT、COUNTD、MAX、MIN等聚合函数。解决方案 将计算字段的...