本文为您介绍DataWorks上引擎数据权限管控的实现方式。前提条件 已了解DataWorks工作空间的物理属性，详情请参见 必读：简单模式和标准模式的区别。已了解DataWorks各模块对应操作的引擎环境。详情请参见 引擎环境与DataWorks模块操作对应...
Sequence Engine通过Sequence Handler接口访问Sequence对象，实现NEXTVAL的滚动、缓存的管理等，最后透传给底层的基表数据引擎，实现最终的数据访问。前提条件 实例版本要求：PolarDB-X 标准版，引擎为MySQL 8.0。使用限制 Sequence不支持...
问题描述 Lindorm宽表引擎是兼容HBase的NoSQL数据引擎，其存储模型是基于LSM-Tree实现的。在执行写入操作时，数据会被先写入预写日志（Write-Ahead-Log，WAL）中，再写入数据库。只要写入过程中没有出现报错，相应的数据一定会写入成功，...
Notebook：智能化交互式数据开发和分析工具，支持面向多种数据引擎开展SQL或Python分析，即时运行或调试代码，获取可视化数据结果。启用新版数据开发（Data Studio）参考如下方式启用新版数据开发（Data Studio）：创建工作空间时，选择 ...
数据探查支持的数据源 如果选择探查的数据量过大，会导致数据库的性能变差，请合理抽取数据进行探查，合理的探查范围请参见 探查范围。...支持 支持（性能较差）支持 数据探查支持的计算 引擎 计算引擎 数据探查 MaxCompute 支持
Notebook：智能化交互式数据开发和分析工具，支持面向多种数据引擎开展SQL或Python分析，即时运行或调试代码，获取可视化数据结果。启用新版数据开发（Data Studio）参考如下方式启用新版数据开发（Data Studio）：创建工作空间时，选择 ...
数据源 单张图片数据接口 由静态数据切换至DataV数据集。更新DataV数据集配置（此操作不会使字段配置丢失）。BI分析数据配置面板中的详细操作说明，请参见 BI分析模式数据面板功能介绍。配置字段说明 字段 说明 图片路径 设置展示的图片，...
建模流程 逆向建模主要用于将大数据引擎中已经存在的物理表反向建模至DataWorks的维度建模中，其建模流程如下：配置逆向建模策略。建模范围：创建模型前，您需要根据业务需求确定需要将哪些表逆向生成模型。该过程需确定表所在的工作空间、...
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
支持 支持（性能较差）支持 数据探查支持的计算 引擎 计算引擎 数据探查 MaxCompute 支持 E-MapReduce 3.X 支持 E-MapReduce 5.x 支持 CDH 5.X 支持 CDH 6.X 支持 亚信DP 5.3 支持 Cloudera Data Platform 7.x 支持 Amazon EMR 支持 星环...
本文介绍通过云原生多模数据库Lindorm控制台查看各引擎类型的连接地址。专有网络和公网 网络类型 说明 专有网络 专有网络VPC（Virtual Private Cloud）是您自己专有的云上私有网络，不同的专有网络之间...通过开源客户端写入Lindorm流引擎数据
数据列级别多级审批：基于底层大数据引擎的访问控制列表与数据分级分类，DataWorks支持按项目与数据分级分类，定义数据列的权限申请及审批策略。说明 仅DataWorks企业版支持您根据业务需要自定义审批流程。数据质量规则：支持管理员配置...
数据源 轮播图数据接口 由静态数据切换至DataV数据集。更新DataV数据集配置（此操作不会使字段配置丢失）。BI分析数据配置面板中的详细操作说明，请参见 BI分析模式数据面板功能介绍。配置字段说明 字段 说明 图片地址 轮播图片的URL地址，...
Dataphin集成了丰富的数据引擎，支持接入MaxCompute、Hive等数据仓库，也支持对接企业传统数据库，如MySQL、Oracle等。背景信息 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源...
说明 项目空间范围默认为全部数据引擎的所有项目空间。目前支持选择扫描ODPS、EMR、HOLO项目的指定表的数据。表名总长度为 0~100，字符不限，不填代表扫描全部表。支持.*通配符。例如，.*name 表示以 name 为后缀；private.*表示以 private...
是 数据引擎名称 选择识别规则限定的引擎范围。说明 当前仅支持识别MaxCompute引擎中的风险数据。每条比较关系只能选择一个引擎，如果您需要限定多个引擎范围，则请单击+添加比较关系 配置多条风险识别条件。是 项目空间名称 选择识别规则...
Dataphin集成了丰富的数据引擎，支持接入MaxCompute、Hive等数据仓库，也支持对接企业传统数据库，如MySQL、Oracle等。背景信息 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源...
区域柱状图支持独立的样式和数据配置，包括区域柱状图的默认颜色、默认高度和内外柱半径比等。本文介绍区域柱状图配置项的含义。在场景编辑器左侧图层列表中，单击的 区域柱状图 图层，进入配置面板配置 区域柱状图 图层的样式和数据。说明...
您可在识别结果页面查看数据资产的数据分类、数据分级的识别结果信息，以下为不同信息的说明：识别信息 说明 数据源类型 数据资产归属的数据引擎。实例/项目/数据库 数据资产归属的实例、项目或数据库名称。表 数据资产归属的数据表的名称...
为什么选择Lindorm AI引擎 数据不出库，一站式数据处理与AI推理 您可以在Lindorm一站式地完成数据接入、存储、计算、推理等任务，确保数据始终存储在数据库内部，满足安全、隐私及监管需求。无需搭建Lindorm到其他AI平台的数据传输通道，...
教程简介 阿里云DataWorks基于多种大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。本教程通过DataWorks，联合云原生大数据计算服务MaxCompute，使用大数据AI公共数据集（淘宝、飞猪、阿里音乐、...
通过JAR方式连接计算引擎 JAR作业开发实践 通过Python方式连接计算引擎 Python作业开发实践 流引擎 通过Lindorm-cli连接流引擎 通过客户端连接并使用Lindorm流引擎 通过开源Kafka客户端连接流引擎 通过开源Kafka客户端写入Lindorm流引擎数据
切换至 计算引擎数据源 页签，单击 添加数据源。在 添加数据源 对话框中配置以下信息。配置项 说明 实例类型 固定选择 云原生多模数据库Lindorm。实例地区 选择目标Lindorm实例的所属地域。实例ID 选择目标Lindorm实例ID。说明 请确保目标...
Schema 填写计算引擎数据库对应的Schema连接信息。用户名/密码 填写GaussDB（DWS）计算引擎数据库的登录用户名和密码。单击 测试连接，测试连接的计算源。测试成功后，单击 提交。完成创建GaussDB（DWS）计算源后，即可为项目绑定GaussDB...
数据质量以数据集（DataSet）为监控对象，支持监控MaxCompute等多种引擎数据表。当离线数据发生变化时，数据质量会对数据进行校验，并阻塞生产链路，以避免问题数据污染扩散。同时，数据质量提供历史校验结果的管理，以便您对数据质量进行...
OLAP资源组不支持创建或写入宽表引擎数据表，只支持数据的查询操作。宽表引擎数据存储在名为 lindorm_table 的Catalog中。访问宽表引擎中的数据，需显式执行 SET CATALOG lindorm_table;切换至该Catalog中。若您已有可使用的宽表，请直接...
企业版 ClickHouse集群 ClickHouse集群包含若干单位计算资源和存储资源，能够提供ClickHouse引擎数据存储和分析服务的PAAS服务。Worker节点 Worker节点是ClickHouse集群内部的副本节点，参与引擎计算的实际资源。CCU CCU（ClickHouse ...
返回结果：+-+|count(*)|+-+|2|+-+重要 宽表引擎数据源仅支持查询已存在表的数据，不支持其他操作。通过宽表引擎使用OLAP资源组 OLAP资源组可作为宽表引擎的扩展查询引擎。您只需连接宽表引擎地址，通过在SQL中指定Hint，即可将复杂查询...
宽表引擎数据存储在名为 lindorm_table 的Catalog中。访问宽表引擎中的数据，需显式执行 USE lindorm_table;切换至该Catalog中。若您已有可使用的宽表，请直接进入下一步。若您尚未创建，请 连接并使用宽表引擎，参考以下语句创建宽表测试...
polardb 支持的配置模式（ConnectionPropertiesMode）：UrlMode（连接串模式）InstanceMode（实例模式）本账号实例模式 名称 类型 示例值 是否必填 描述和注意点 regionId String cn-shanghai 是 实例所属的Region，注意：之前非引擎数据源...
归档后的表会新增四列数据，不影响表原始数据的使用：归档信息（工单号和归档时间）数据库名称 表名称 实例ID（DMS录入实例时赋予的ID，与实例真实ID对应）方式二：通过Lindorm查询归档数据 宽表引擎 数据查询。周期调度 配置项 说明 调度...
任务编排的Lindorm Spark节点可以通过Lindorm计算引擎高效地完成分布式计算任务，满足用户在数据生产、交互式分析、机器学习和图计算等场景中的计算需求，同时可以方便地读取Lindorm宽表引擎数据，与OSS上的数据进行联合分析。前提条件 您...
因为您的数据源是自行配置的，并非本DataWorks项目下的计算引擎数据源。全增量实时同步至MaxCompute暂不支持非计算引擎数据。实时任务，运行报错：...
2025年02月 2025年02月正式发布MaxCompute SQL V50版本，新增功能如下：数仓引擎 数据格式 Decimal数据类型支持更高精度的scale：Decimal小数部分的位数scale，取值范围从[0,18]扩大至[0,38]，需要通过Flag参数 SET odps.sql.decimal2....
此外，空间级预设角色对MaxCompute引擎数据也具有一定的权限管控，详情请参见 MaxCompute数据权限控制详情。说明 您也可通过命令查看MaxCompute侧的数据权限，详情请参见 通过MaxCompute SQL查询权限信息。例如，执行 desc role role_...
当前仅MaxCompute、EMR引擎数据支持下载导出本地文件。例如，您使用的是标准版 DataWorks（上限为 20 万条），但18万条就达到数据量上限 1GB，那将仅限于下载 1GB 的数据。更多说明请参见 导出为本地文件。DataWorks版本 下载数据条数上限...
示例 使用计算引擎的 test 资源组，查询宽表引擎数据库 searchindex_db 中名为 search_table 的表。SELECT/*+_use_ldps_(test)*/*FROM searchindex_db.search_table LIMIT 50;JDBC 直接连接 OLAP 资源组 OLAP 资源组提供了 VPC 内网可访问...
自动迁移Amazon Redshift数据至AnalyticDB for PostgreSQL V7.2.1.0 类别 功能 功能描述 相关文档 新增 图分析引擎 云原生数据仓库 AnalyticDB PostgreSQL 版 以插件形式集成了图分析引擎功能，并支持使用 Cypher 查询语言对图数据进行高效...
数据库引擎 数据库引擎分类 文档链接 Atomic Atomic Lazy Lazy Replicated Replicated PostgreSQL PostgreSQL MySQL 重要 ClickHouse 企业版不支持MySQL引擎。MySQL SQLite SQLite MaterializedPostgreSQL MaterializedPostgreSQL
使用 pdbcli rebuild 重建指定节点的数据库引擎或者其他组件。如果指定节点的目标组件不存在，则直接新建该组件。如果不指定节点的具体组件，默认重建或新建数据库引擎。如果重建指定节点的数据库引擎，将通过主节点重建指定的Standby节点...