增量MaxCompute源表监听到新分区时，如果该分区还有数据没有写完，如何处理？MaxCompute连接器运行报错：ErrorMessage=Authorization Failed[4019],You have NO privilege 如何填写增量MaxCompute的startPartition参数？为什么带有增量...
子查询 SELECT DISTINCT ds FROM t_ds_set 先执行，其结果需要被用来做分区裁剪，来优化主查询需要读取的分区数。这两次运行分别是两个Fuxi作业，Logview中体现的是两个 tab 页来显示：第一个 tab 页显示 job_0 全部成功，实际上第二个 tab...
支持自动分区管理（通过函数接口创建分区，自动将主表数据迁移到分区表），或手工分区管理（通过函数实现，将已有的表绑定到分区表，或者从分区表剥离）。支持的分区字段类型包括int、float、date以及其他常用类型，包括自定义的domain。...
支持自动分区管理（通过函数接口创建分区，自动将主表数据迁移到分区表），或手工分区管理（通过函数实现，将已有的表绑定到分区表，或者从分区表剥离）。支持的分区字段类型包括int、float、date以及其他常用类型，包括自定义的domain。...
这个命令被执行后，该索引被增加的约束“拥有”，这和用常规 ADD PRIMARY KEY 或 ADD UNIQUE 命令创建的索引一样。特别地，删掉该约束将会导致该索引也消失。当前在分区表上不支持这种形式。语法 ALTER TABLE[IF EXISTS][ONLY]name[*]...
当在一个分区表上调用 CREATE INDEX 时，默认的行为是递归到所有的分区上以确保它们都具有匹配的索引。每一个分区首先会被检查是否有一个等效的索引存在，如果有则该索引将被挂接为被创建索引的一个分区索引，而被创建的索引将成为其父索引...
预设数据：用固定的补插数据来进行超时插补，消息体内容为JSON格式数据。以“应用场景”的示例为例：选择 上一条真实数据。高级配置 消息分区键 可选，定义超时插值的维度，常用于区分不同设备间的消息。不设置时，物联网平台系统会默认将 ...
分区可以使用表继承来实现，这能够带来一些声明式分区不支持的特性，例如：对声明式分区来说，分区必须具有和分区表正好相同的列集合，而在表继承中，子表可以有父表中没有出现过的额外列。表继承允许多继承。声明式分区仅支持范围、列表...
又可以用组合键来精确定位某张表，示例命令如下：SELECT count(*)from mf_project.mf_tab WHERE project_name="xxxdw"AND name="adm_ctu_cle_kba_midun_trade_dd"AND type="TABLE;甚至可以用于区域查询，比如统计以 adm 开头的表：SELECT ...
分区表一定要指定上传的分区，多级分区一定要指定到末级分区。更多信息请参见 Upload。Download：下载MaxCompute表或指定Instance执行结果至本地。只支持下载到单个文件，每一次下载只支持下载一张表或一个分区到一个文件。分区表一定要...
分布表使用 AnalyticDB PostgreSQL支持的分区表类型包括范围（Range）分区、值（List）分区和多级分区表，下图为一个多级分区表设计实例，一级分区采用按月的区间（Range）分区，二级分区采用按地区的值（List）分区设计。使用场景 是否...
分区又可以配置为两类：exclusive分区：只允许请求和该分区匹配的容器调度到该分区的节点上。non-exclusive分区：除了分配该分区容器请求外，还允许在有空闲资源时将请求为DEFAULT分区的容器调度上来（或请求未特殊制定分区）。目前只有...
InitPlan：预查询，被用在动态分区消除中，当执行时还不知道优化器需要用来标识要扫描分区的值时，会执行这个预查询。Sort：为另操作（例如Aggregation或者Merge Join）进行所有数据排序。Group By：通过一个或者更多列对行进行分组。Group...
查询优化器使用数据库的数据统计信息来选择具有最小总代价的查询计划，查询代价通过磁盘I/O取得的磁盘页面数作为单位来度量。可以使用EXPLAIN和EXPLAIN ANALYZE语句发现和改进查询计划。EXPLAIN的语法如下：EXPLAIN[ANALYZE][VERBOSE]...
INTERVAL RANGE是RANGE分区的扩展，当新插入的数据超过现有分区的范围时，该分区允许数据库自动创建新分区。前提条件 集群版本需为 PolarDB MySQL版 8.0.2版本且Revision version为8.0.2.2.0及以上。您可以通过 查询版本号 确认集群版本。...
自动分区与手动分区 自动分区 自动分区，指创建表时不指定任何分区定义（如分区键、分区策略等），PolarDB-X 能够自动选择分区键并对表及其索引进行水平分区的功能。AUTO模式数据库支持自动分区，而DRDS模式数据库不支持。示例如下：使用...
RANGE分区用边界定义了表或索引中分区的范围和分区间的顺序。RANGE分区通常用于在DATE类型的列上按时间间隔组织数据。因此，大多数访问RANGE分区的SQL语句都关注时间范围。这方面的一个例子是类似于“从特定时间段选择数据”的SQL语句。在...
ALTER TABLE…EXCHANGE PARTITION命令可以用一个分区或子分区交换现有的表。语法介绍 如果您打算添加大量的数据到分区表中，可以使用ALTER TABLE…EXCHANGE PARTITION命令来进行批量加载。您也可以使用ALTER TABLE…EXCHANGE PARTITION命令...
使用范围或哈希分区时，分区键可以包含多个列或表达式（最多 32 个，但在构建 PolarDB时可以更改此限制），但对于列表分区，分区键必须由单个列或表达式组成。范围和列表分区需要 btree 运算符类，而哈希分区需要哈希运算符类。如果没有...
2:分区过滤规则，支持指定多个分区字段的值，不同分区字段用逗号分隔，如：pt1=1,pt2=2,pt3=3 将匹配同时满足pt1=1，pt2=2，pt3=3的所有分区【多分区目前不支持function功能，即不支持%Y%m%d|-1 days这样的，单分区是可以支持的】。...
2:分区过滤规则，支持指定多个分区字段的值，不同分区字段用逗号分隔，如：pt1=1,pt2=2,pt3=3 将匹配同时满足pt1=1，pt2=2，pt3=3的所有分区【多分区目前不支持function功能，即不支持%Y%m%d|-1 days这样的，单分区是可以支持的】。...
done分区自动触发回流 iGraph支持通过指定.done 分区来标示对应分区可以回流.done 分区为一个无数据的空分区，只用来提供标识 示例 ds=20160528这个分区,如果您认为这个分区可以回流了，则需要产出对应的done分区:ds=20160528.done，此时，...
Range-Range分区是指一级分区是Range分区，二级分区也是Range分区的组合分区类型。Range-Range分区适用于在多个时间维度上存储与时间相关的数据应用程序，这些应用程序通常不使用某个特定的时间维度来访问数据，而是使用另一个时间维度，...
说明 多个分区之间用英文逗号（,）分隔。指定多级分区，格式为 name1=value1/name2=value2。否 predictInputTableName 预测表表名，配置该项参数后即可输出预测结果。否 predictInputTablePartitions 输入预测表分区。否 ...
组件下游接入Word2Vec组件，Word2Vec组件会先将数据整理成单个单词的形式，后续会按照整个Doc来处理。组件配置 您可以使用以下任意一种方式，配置Word2Vec组件参数。方式一：可视化方式 在 Designer 工作流页面配置组件参数。页签 参数 ...
概述 Dataphin集成任务MaxCompute输出组件输出表存在多级分区时如何填写分区配置。MaxCompute数据源如果建表时存在多级分区，同步数据到该表时分区配置应该如何填写？详细信息 支持配置多级分区，分区之间用逗号相隔。适用于 Dataphin
分区索引主要由HASH分区、时间分区或HASH分区和时间分区的组合组成，您可以根据以下场景和建议合理设置分区索引：业务数据有明显的时间属性，例如查询语句携带一个时间字段作为过滤字段，建议设置时间分区属性。在业务查询场景中，多数情况...
分区信息如下：Hash分区 定义一组分区 您可以使用表属性 partition_by_hash_columns 配置分区列，表属性 partition_by_hash_buckets 配置分区个数，所有的分区列必须是主键列的子集。示例如下。CREATE TABLE mytable(col1 varchar WITH...
时间分区 时间分区会按照时间维度进行数据分区存储，存储底层会将不同时间分区内的数据进行分段存储，一个时间分区内的数据包含时间线索引和时序数据。时序引擎支持在数据库设置时间分区，一般情况下，如果创建周期性时间线导致了时间线...
如果您要在分区表中创建索引，那么create index命令则会基于引用的表的基础上增殖索引：如果您在CREATE INDEX命令中指定了分区根的名称，那么同时也会创建表的任何分区或子分区索引。如果您在create index命令中指定了分区备份表的名称，...
背景信息 在使用Kafka集群过程中，常常会碰到以下问题：leader分区不均衡：导致各个Broker负载不均衡，读写吞吐下降。Borker分区数据量的不均衡：导致部分机器的磁盘利用率明显高于集群平均值，增加Broker宕机的风险。节点内磁盘间的利用率...
查询 Topic 中存储的消息，可通过消息创建时间或者位点来进行查询。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息...
调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下：操作：是指具体的权限点。访问级别：是指每个操作的访问级别，取值为写入（Write）、读取...
调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句的 Action 元素中使用，用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下：操作：是指具体的权限点。访问级别：是指每个操作的访问级别，取值为写入（Write）、读取...
支持Oracle兼容的分区表创建、修改、扩展功能 PolarDB PostgreSQL版（兼容Oracle）2.0版本 支持Oracle风格的分区表，包括一级、二级分区的创建，支持List、Range、Hash三种分区的创建。支持常见的CREATE、COALESCE、DROP、EXCHANGE、MERGE...
分区信息：缓存每个分区的信息，如分区数据格式，分区存储位置、分区值等。文件信息：缓存每个分区所对应的文件信息，如文件路径位置等。以上缓存信息不会持久化到SelectDB中，当SelectDB进行主备切换、FE节点重启等操作时，都可能导致缓存...
选择合适的二级分区键 二级分区通过 PARTITION BY 来指定，如：#直接用ds的值来做二级分区 PARTITION BY VALUE(ds)#用ds算出的天来做二级分区 PARTITION BY VALUE(DATE_FORMAT(ds,'%Y%m%d'))#用ds算出的月来做二级分区 PARTITION BY VALUE...
顺序消息（FIFO消息）是 云消息队列 RocketMQ 版 提供的一种严格按照顺序来发布和消费的消息类型。本文提供使用HTTP协议下的C#SDK收发顺序消息的示例代码。背景信息 顺序消息分为两类：全局顺序：对于指定的一个Topic，所有消息按照严格的...
顺序消息（FIFO消息）是 云消息队列 RocketMQ 版 提供的一种严格按照顺序来发布和消费的消息类型。本文提供使用HTTP协议下的Node.js SDK收发顺序消息的示例代码。背景信息 顺序消息分为两类：全局顺序：对于指定的一个Topic，所有消息按照...
顺序消息（FIFO消息）是 云消息队列 RocketMQ 版 提供的一种严格按照顺序来发布和消费的消息类型。本文提供使用HTTP协议下的Python SDK收发顺序消息的示例代码。背景信息 顺序消息分为两类：全局顺序：对于指定的一个Topic，所有消息按照...