背景信息 智能分析套件 Quick BI 是一个专为云上用户设计的易上手且性能强的大数据分析平台，不仅是业务人员查看数据的工具，更是数据化运营的助推器。前提条件 在执行操作前，请确认您已满足如下条件：已 创建MaxCompute项目。已获取可...
具体操作，请参见 数据源白名单配置 背景信息 Aliyun HBase即阿里云的云数据库HBase，是低成本、高扩展、云智能的大数据NoSQL。兼容标准HBase访问协议，提供低成本存储、高扩展吞吐、智能数据处理等核心能力，具备PB规模、高并发、秒级伸缩...
在 新建数据源 页面的 大数据存储 区域，选择 Hologres。如果您最近使用过Hologres，也可以在 最近使用 区域选择Hologres。同时，您也可以在搜索框中，输入Hologres的关键词，快速筛选。在 新建Hologres数据源 页面中，配置连接数据源参数...
在 新建数据源 页面的 大数据存储 区域，选择 SelectDB。如果您最近使用过SelectDB，也可以在最近使用区域选择SelectDB。同时，您也可以在搜索框中，输入SelectDB的关键词，快速搜索。在 新建SelectDB数据源 页面中，配置连接数据源参数。...
典型工作流程如下：功能介绍 DataWorks 数据质量支持对常见大数据存储（MaxCompute、E-MapReduce、Hologres、AnalyticDB 等）进行质量校验，从完整性、准确性、一致性等多个维度配置监控规则，并与调度任务关联，实现自动化校验与问题告警...
在 新建数据源 页面的 大数据存储 区域，选择 SelectDB。如果您最近使用过SelectDB，也可以在最近使用区域选择SelectDB。同时，您也可以在搜索框中，输入SelectDB的关键词，快速搜索。在 新建SelectDB数据源 页面中，配置连接数据源参数。...
在 新建数据源 页面的 大数据存储 区域，选择 Lindorm（计算引擎）。如果您最近使用过Lindorm（计算引擎），也可以在 最近使用 区域选择Lindorm（计算引擎）。同时，您也可以在搜索框中，输入Lindorm（计算引擎）的关键词，快速筛选。在 ...
在新建数据源页面的 大数据存储 区域，选择Doris。如果您最近使用过Doris，也可以在最近使用区域选择Doris。同时，您也可以在搜索框中，输入Doris的关键词，快速搜索。在 新建Doris数据源 页面中，配置连接数据源参数。配置数据源的基本...
交互式查询：借助Trino或Presto，基于标准SQL语法，提供快速的大数据查询服务，其响应时间可达到亚秒级，能够有效满足运营团队对多维度数据分析的需求。数据应用：数据科学：通过API服务将处理后的数据提供给风控引擎、推荐系统等下游应用...
在新建数据源页面的 大数据存储 区域，选择Doris。如果您最近使用过Doris，也可以在最近使用区域选择Doris。同时，您也可以在搜索框中，输入Doris的关键词，快速搜索。在 新建Doris数据源 页面中，配置连接数据源参数。配置数据源的基本...
在 新建数据源 页面的 大数据存储 区域，选择 Kudu。如果您最近使用过Kudu，也可以在 最近使用 区域选择Kudu。同时，您也可以在搜索框中，输入Kudu的关键词，快速筛选。在 新建Kudu数据源 页面中，配置连接数据源参数。配置数据源的基本...
在 新建数据源 页面的 大数据存储 区域，选择 Lindorm（计算引擎）。如果您最近使用过Lindorm（计算引擎），也可以在 最近使用 区域选择Lindorm（计算引擎）。同时，您也可以在搜索框中，输入Lindorm（计算引擎）的关键词，快速筛选。在 ...
在 新建数据源 页面的 大数据存储 区域，选择 DolphinDB。如果您最近使用过DolphinDB，也可以在 最近使用 区域选择DolphinDB。同时，您也可以在搜索框中，输入DolphinDB的关键词，快速搜索。在 新建DolphinDB数据源 页面中，配置连接数据源...
背景信息 CDH是Cloudera的开源平台发行版，提供开箱即用的集群管理、集群监控、集群诊断等功能，并支持使用多种组件，助力您执行端到端的大数据工作流程。CDP是跨平台收集和整合客户数据的公共数据平台，可帮助您收集实时数据，并将其构建...
在 新建数据源 页面的 大数据存储 区域，选择 Hologres。如果您最近使用过Hologres，也可以在 最近使用 区域选择Hologres。同时，您也可以在搜索框中，输入Hologres的关键词，快速筛选。在 新建Hologres数据源 页面中，配置连接数据源参数...
在 新建数据源 页面的 大数据存储 区域，选择 DolphinDB。如果您最近使用过DolphinDB，也可以在 最近使用 区域选择DolphinDB。同时，您也可以在搜索框中，输入DolphinDB的关键词，快速搜索。在 新建DolphinDB数据源 页面中，配置连接数据源...
在 新建数据源 页面的 大数据存储 区域，选择 ArgoDB。如果您最近使用过ArgoDB，也可以在 最近使用 区域选择ArgoDB。同时，您也可以在搜索框中，输入ArgoDB的关键词，快速搜索。在 新建ArgoDB数据源 页面中，配置数据源的基本信息。参数 ...
大数据量处理：支持快速处理较大规模的数据（十万条以上数据）。Spark SQL语法：基于Spark 3.1.2版本部署，提供该版本所有语法特性和原生函数。原生函数包括聚合函数、窗口函数、数组函数、Map函数、日期和时间处理函数、JSON处理函数等。...
否 500000 batchSize 每批次导入数据的最大数据量和 maxBatchRows 共同控制每批次的导入数量。每批次数据达到两个阈值之一，即开始导入这一批次的数据。否 94371840 maxRetries 每批次导入数据失败后的重试次数。否 3 labelPrefix 每批次...
类别 描述 相关文档 OpenAPI DataWorks开放平台的OpenAPI功能，为您提供开放API能力，通过开放API实现本地服务和DataWorks服务的交互，提升企业大数据处理效率，减少人工操作和运维工作，降低数据风险和企业成本。开放API（OpenAPI）开放...
在 新建数据源 页面的 大数据存储 区域，选择 Paimon。如果您最近使用过Paimon，也可以在 最近使用 区域选择Paimon。同时，您也可以在搜索框中，输入Paimon的关键词，快速搜索。在 新建Paimon数据源 页面中，配置数据源的基本信息。参数 ...
在 新建数据源 页面的 大数据存储 区域，选择 Paimon。如果您最近使用过Paimon，也可以在 最近使用 区域选择Paimon。同时，您也可以在搜索框中，输入Paimon的关键词，快速搜索。在 新建Paimon数据源 页面中，配置数据源的基本信息。参数 ...
在 新建数据源 页面的 大数据存储 区域，选择 TDH Inceptor。如果您最近使用过TDH Inceptor，也可以在 最近使用 区域选择TDH Inceptor。同时，您也可以在搜索框中，输入TDH Inceptor的关键词，快速筛选。在 新建TDH Inceptor数据源 页面中...
自然语言处理：基于大数据的训练和预测。基于语料库构建单词同现矩阵，频繁项集数据挖掘、重复文档检测等。广告推荐：用户单击（CTR）和购买行为（CVR）预测。MapReduce流程说明 MapReduce处理数据过程主要分成Map和Reduce两个阶段。首先...
兼顾性能与可靠性 Delta Table适合TB到PB级别的海量数据管理，即使在极大数据规模下，元数据操作依然快速响应，查询支持分区裁剪、列裁剪、谓词下推，可避免不必要的数据扫描。ACID事务管理：采用乐观并发控制，支持多写入方并发操作，冲突...
该规格提供的免费数据量额度等，请参见 备份计划规格。备份方式 选择 物理备份。存储空间 您创建时无需选择容量，后续根据实际存入（原DBS）内置存储中的数据量计费。计费详情，请参见 存储费用。资源组 配置资源组。选择默认或自定义的...
在 新建数据源 页面的 大数据存储 区域，选择 Amazon Redshift。如果您最近使用过Amazon Redshift，也可以在 最近使用 区域选择Amazon Redshift。同时，您也可以在搜索框中，输入Amazon Redshift的关键词，快速搜索。在 新建Amazon ...
在 新建数据源 页面的 大数据存储 区域，选择 Databricks。如果您最近使用过Databricks，也可以在 最近使用 区域选择Databricks。同时，您也可以在搜索框中，输入Databricks的关键词，快速搜索。在 新建Databricks数据源 页面中，配置连接...
在 新建数据源 页面的 大数据存储 区域，选择 Amazon Redshift。如果您最近使用过Amazon Redshift，也可以在 最近使用 区域选择Amazon Redshift。同时，您也可以在搜索框中，输入Amazon Redshift的关键词，快速搜索。在 新建Amazon ...
在 新建数据源 页面的 大数据存储 区域，选择 Databricks。如果您最近使用过Databricks，也可以在 最近使用 区域选择Databricks。同时，您也可以在搜索框中，输入Databricks的关键词，快速搜索。在 新建Databricks数据源 页面中，配置连接...
操作流程 通过数据集成导出MaxCompute数据的流程如下：添加MaxCompute数据源 将MaxCompute数据源添加至DataWorks的数据源列表。添加目标数据源 将目标数据源添加至DataWorks的数据源列表。创建业务流程 在DataWorks上创建业务流程，为创建...
Oracle CDC：实时数据同步模式，对源表进行INSERT、UPDATE或DELETE等操作的同时可以提取数据，变化的数据被保存在数据库的变化表中，通过订阅变化数据的方式实现数据的秒级同步。MySQL Binlog：实时数据同步模式，通过同步并解析记录所有...
导入数据 在 Project Explorer 区域，单击MaxCompute项目的 Tables&Views 节点前的下拉箭头，右键单击需要导入数据的表，选择 Import data into table。在 Importing data to table_name 对话框中，配置导入文件参数。Input File：导入数据...
背景信息 HBase是用于处理存储在Hadoop集群中大量数据的SQL查询引擎。如果您使用的是HBase，在导出Dataphin数据至HBase，您需要先完成HBase数据源的创建。权限说明 仅支持拥有 新建数据源 权限点的自定义全局角色和 超级管理员、数据源管理...
接口说明 本接口一般用于敏感数据资产信息表中列数据的查看，便于用户准确的对敏感数据进行分析。注意事项 DescribeColumns 接口已修订为 DescribeColumnsV2。建议您在开发应用程序时使用较新的版本 DescribeColumnsV2。QPS 限制 本接口的...
本文档将引导您完成使用阿里云数据传输服务（DTS）从MySQL数据库同步数据的全过程，整个过程可以归纳为七大核心步骤。步骤一：准备工作 在配置同步任务前，请完成以下准备工作，确保任务顺利执行。（可选）接入阿里云：请您先确保业务环境...
并发数是指数据同步任务中，可以从源端并行读取和向目标存储端并行写出数据的最大线程数。为了提高数据同步的效率，可以适当调整任务的并发数，以缩短数据搬迁需要的时间。在产品中配置位置如图所示：文件类型（OSS、FTP、HDFS、S3）数据...
数据过滤 您将要同步数据的筛选条件，暂时不支持limit关键字过滤。SQL语法与选择的数据源一致，此处可以不填。切分键 读取数据时，根据配置的字段进行数据分片，实现并发读取，可以提升数据同步效率。此处可以不填。选择数据去向。参数 ...
如果某行数据的主键属于读取范围，但是该行数据不包含指定返回的列，那么返回结果中不包含该行数据。limit 数据的最大返回行数，此值必须大于0。表格存储按照正序或者逆序返回指定的最大返回行数后即结束该操作的执行，即使该区间内仍有未...
对于存储层，StarRocks利用了对象存储的几乎无限容量和高可用性特点，不仅支持多种云上对象存储，也兼容HDFS，确保数据的大规模存储和持久化。StarRocks的存储计算分离模式保留了与传统存算一体模式相同的功能，无论是数据写入还是热数据...