同步规则配置 表列表 输入需要同步的表名，多个表名间使用换行分隔，不超过1024个字符。表名支持以下三种格式：tablename、db.tablename、schema.tablename。Hive（Hudi表格式）仅当实时引擎使用Apache Flink，且计算源为Flink on yarn部署...
不支持 不支持 离散TTL 支持保留多个时间区段的数据。不支持 不支持 运维诊断 运维工具 界面化集群管理工具，支持表，Namespace，Group，ACL等管理，请参见 登录集群管理系统。HBase Shell 黑屏工具 数据查询 集群管理系统内支持图形化SQL...
单元格填报：设置单个单元格的填报配置，适用于一个或多个单元格拼接录入数据的场景。表格填报：通过添加表格某一行的填报控件，快速设置对应列所有单元格的填报控件。适用于表格整行都需要录入数据的场景。数据集填报 单元格填报 表格填报...
趋势图可支持配置多个走势线，只需在配置页面中添加数值列，就可实现多走势线的展示。上图中就是配置了 3 个数值列，显示出 3 条走势线。趋势图配置页面见下图。上图数据源选择的是常用服务指标的数据源，以下为此类数值列的配置页面：配置...
图表样式 交叉透视表是表格组件的一种，支持数据内容的自定义展示，能够将数据信息以表格的形式清晰地展示在可视化应用上。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索配置 面板中输入您需要搜索的配置项名称，快速...
数据源 数据层级 Hive Database.Table MaxCompute Project.Schema.Table 或 Project.Table 不同的数据源的读取方式如下表：数据源类型 数据存储服务/API 计算引擎 MaxCompute 开放存储（Storage API）Spark SQL BigQuery Storage Read API ...
适用于能确定完整主键，且需要读取行数较多或者要读取多个表中数据的场景。范围读取数据 读取一个主键范围内的数据。适用于能确定完整主键范围或者主键前缀的场景。删除数据 用于删除数据表中的数据。删除方式包括单行删除或者批量删除。...
数据查询 可用于全文检索的数据查询功能请参见下表说明。功能 说明 适用场景 匹配查询 MatchQuery采用近似匹配的方式查询表中包含指定短语的数据。表格存储 会先对Text类型的列值和查询关键词按照设置好的分词器做切分，然后按照切分好后的...
只有分词后的多个词在行数据中以同样的顺序和位置存在时，才表示行数据满足查询条件。适用于大数据分析、内容搜索和个性化推荐等场景。数据处理 全文检索过程中涉及到数据处理功能请参见下表说明。功能 说明 摘要与高亮 在搜索结果中对与...
只有分词后的多个词在行数据中以同样的顺序和位置存在时，才表示行数据满足查询条件。适用于大数据分析、内容搜索和个性化推荐等场景。数据处理 全文检索过程中涉及到数据处理功能请参见下表说明。功能 说明 摘要与高亮 在搜索结果中对与...
只有分词后的多个词在行数据中以同样的顺序和位置存在时，才表示行数据满足查询条件。适用于大数据分析、内容搜索和个性化推荐等场景。数据处理 全文检索过程中涉及到数据处理功能请参见下表说明。功能 说明 摘要与高亮 在搜索结果中对与...
支持MaxCompute、RDS MySQL、PostgreSQL、AnalyticDB PostgreSQL、Hologres多种云计算资源进行物理表数据预览，可快速对各类数据资源下的物理表的数据内容进行查看。支持开启地图模式，并实现表格和地图的双向联动。（邀测中）支持对物理...
数据面板 配置字段说明 字段 说明 value 表格的值说明，可自定义多个字段值，需要与配置面板中列配置内的列字段名匹配。表 1.配置项说明 配置项 说明 受控模式 打开开关，资产 初始化状态下不请求数据，仅通过回调ID或蓝图编辑器配置的方法...
如果短时间内多个大表都满足清理条件，所有的自动清理工作进程可能长时间忙于清理这些表。这将导致其他表和数据库在工作进程可用前无法被清理。对于单个数据库中的工作进程数量并没有限制，但是工作进程会尽量避免重复其他工作进程已完成的...
支持MaxCompute、RDS MySQL、PostgreSQL、AnalyticDB PostgreSQL、Hologres 多种云计算资源进行物理表数据预览，可快速对各类数据资源下的物理表的数据内容进行查看。当云计算资源为AnalyticDB PostgreSQL时，支持对视图进行数据预览。支持...
准备工作 前提条件 已准备好待添加的 数据源 或本地数据集文件（.xls/.xlsx）。进入数据集管理 登录 DataV控制台。在 功能导航 模块单击 数据集，进入数据集管理页面。新建数据集 在数据集管理页面中，单击 新建数据集，进入创建页面。在 ...
多可用区部署 云原生多模数据库 Lindorm 的多可用区部署方案是指将一个Lindorm实例部署在多个可用区，多可用区实例具备更高的容灾能力，同时Lindorm实例可以实现多个可用区之间数据的强一致，也可以在数据最终一致的情况下发出请求，快速...
本文介绍通过创建Lindorm Streams实现数据订阅功能，数据订阅功能的Push模式是将 云原生多模数据库 Lindorm 表格的增量数据推送至下游消息队列Kafka，您可以根据自身业务需求自由消费增量数据，搭建或实现多种业务场景。推送流程 数据订阅...
3）数据汇总层：数据明细层的数据可以定期（按天或者按小时）ETL（比如关联维表、过滤、聚合）后写入到数据汇总层。数据汇总层的数据供后续的复杂分析；4）应用数据层：直接对外提供数据查询服务（基于Lindorm SQL服务）支撑上层大数据风控...
数据操作 并行写入 数据 表格存储的表会被切分为多个分区，这些分区分散在多个表格存储的服务器上。当有一批按主键顺序排列的数据要上传到表格存储中时，如果按顺序写入数据，则可能会导致写入压力集中在某个分区中，而其他的分区处于空闲...
为实现并行读取，一个同步Job会被切分为多个Task（独立的数据库查询）。由于数据库的事务隔离性，每个Task获取的是不同时间点的数据快照，导致无法捕获在所有Task启动后发生的数据变更。接受此行为作为高吞吐量数据同步的正常预期。多次...
适用于能确定完整主键，且需要读取行数较多或者要读取多个表中数据的场景。GetRange 读取指定主键范围内的数据。适用于能确定完整主键范围或者主键前缀的场景。使用二级索引 重要 使用二级索引功能将产生额外的数据存储量。当向数据表写入...
本文为您介绍如何对表中行数据进行管控，以及申请行权限。...查询多个管控值所在的数据行时，可在WHERE条件中使用 IN。示例SQL如下：SELECT*FROM dms_test WHERE buyer_name IN('name1','name2','name3');相关文档 行级管控
实例 服务地址 每个表格存储实例对应一个服务地址（Endpoint），应用程序进行表和数据操作时需要指定服务地址。服务地址 使用方式 控制台 表格存储通过控制台完成时序模型和宽表模型的实例基础操作、表操作、数据基本操作、SQL查询相关操作...
时序引擎也支持创建多个数据库，不同的数据库在存储层面进行物理隔离，支持设置不同的数据有效期（TTL）、时间分区和冷热存储分界线。创建数据库的具体操作，请参见 CREATE DATABASE。示例 创建一个名为DB1的数据库，设置数据为不过期。...
工作原理 函数计算通过 Tablestore触发器 实现对表格存储增量数据的自动处理。当数据表发生变更时，Tablestore Stream 实时捕获增量变更信息，触发器监听Stream中的数据变化并自动调用相应函数进行处理，实现数据变更的实时响应和处理。...
目标MaxCompute项目列表 否 若一个数据源的数据需要迁移到多个目标项目，需配置目标MaxCompute项目列表。MaxCompute执行迁移作业的项目 是 迁移过程中，执行在MaxCompute上发起的Spark、SQL等迁移作业的项目，并使用该项目关联的默认计算...
术语 说明 地域 地域（Region）物理的数据中心，表格存储 服务会部署在多个阿里云地域中，您可以根据自身的业务需求选择不同地域的 表格存储 服务。更多信息，请参见 表格存储已经开通的Region。读写吞吐量 读吞吐量和写吞吐量的单位为读...
BatchUpdatePartitions 批量更新数据表的分区 为数据湖的数据表，批量更新多个分区。RenamePartition 更新数据表分区名 更新数据湖中数据表的分区名称。函数 函数 CreateFunction 新增数据库的函数 新增数据湖中数据库的用户自定义函数。...
目标MaxCompute项目列表 否 若一个数据源的数据需要迁移到多个目标项目，需配置目标MaxCompute项目列表。MaxCompute执行迁移作业的项目 是 迁移过程中，执行在MaxCompute上发起的Spark、SQL等迁移作业的项目，并使用该项目关联的默认计算...
若同步或迁移对象为表级别且需要进行编辑（例如表或列名映射），则当单次同步或迁移任务的表数量超过1000张时，建议您将待同步或迁移的表分批配置为多个DTS实例，或将其配置为整库的同步或迁移实例。若DTS实例包含增量任务，Binlog日志有...
服务地址 每个 表格存储 实例对应一个服务地址（Endpoint），应用程序进行表和数据操作时需要指定服务地址。如需了解服务地址类型以及如何获取服务地址，请参见 服务地址。读写吞吐量 读/写吞吐量的单位为读服务能力单元和写服务能力单元，...
填写指定数据库：仅对指定的数据库生效，多个库名用英文逗号,分隔。表名 选填。指定策略生效的表。支持如下选型：（默认）所有表：对指定数据库内的所有表生效。填写指定表：仅对指定的表生效，多个表名用英文逗号,分隔。字段名 必填。需要...
应用表是面向具体业务场景时，用于组织相同时间周期、相同维度的多个原子指标、派生指标或统计粒度的统计数据，为后续的业务查询，OLAP分析，数据分发等提供基础。本文为您介绍如何创建应用表。功能介绍 应用表是将一个数据集市或主题域中...
表格存储 按照分区键对数据表的数据进行分区，具有相同分区键的行会被划分到同一个分区，实现数据访问负载均衡。属性列（Attribute Column）一行中除主键列外，其余都是属性列。属性列会对应多个值，不同值对应不同的版本，每行的属性列...
功能特性 支持以用户的视角展示自有权限或申请授权成功的数据表、数据服务API资产。支持特定角色对数据表、数据服务API等数据资产进行管理。工作组管理员对本工作组的数据资产具有管理权限。租户资产管理员对该租户下的所有工作组的数据...
说明 除了直接添加表格分析单元外，您也可在 SQL分析单元 运行结果处切换到表格，进行数据的表格可视化。使用表格分析 在表格分析单元左上角，选择当前分析文档中已生成的查询结果集（序号1），系统将自动分析相关数据，并创建一个合适的...
支持数据集上字段的数据过滤，提供对多个数据表left、right、inner和full join关联。支持展示表信息、表结构以及物理表DDL语句。洞察分析 支持对连接的数据集进行洞察分析。对数据集配置并运行洞察任务，自动挖掘数据规律并生产分析图表和...
3.移除索引 如果你正在载入一个新创建的表，最快的方法是创建该表，用 COPY 批量载入该表的数据，然后创建表需要的任何索引。在已存在数据的表上创建索引要比在每一行被载入时增量地更新它更快。如果你正在对现有表增加大量的数据，删除...
所谓分片，就是将输入数据切分为大小相等的数据块，每一块作为单个Map Worker的输入被处理，以便于多个Map Worker同时工作。每个Map Worker在读入各自的数据后，进行计算处理，最终通过Reduce函数整合中间结果，从而得到最终计算结果。详情...