当Pod由于调度资源不足而处于Pending状态时，节点伸缩会开始模拟调度，计算在开启弹性的节点池中哪个节点池弹出节点后可容纳这些Pending Pod，并在满足需求时弹出相应的节点。说明 模拟调度将一个开启弹性的节点池当成一个抽象节点，开启...
为了节约成本，PolarDB 支持配置不同规格的主节点和只读节点，但至少有一个和主节点同规格的只读节点作为灾备，建议将这个节点配置为热备节点。连接保持和事务保持 常规的主备切换或热升级操作会对应用服务造成影响，导致连接闪断、新建...
后续：离线同步数据质量问题与同步任务调优 离线同步任务调优 离线同步数据质量排查 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何排查离...
常见问题 为什么节点自动伸缩组件无法弹出节点？请检查是否存在如下几种场景：配置开启了弹性的节点池中的实例类型无法满足Pod的请求资源（Request）。ECS实例规格给出的资源大小是实例的售卖规格，实际运行时ACK需要占用一定的节点资源来...
⑤ 此时节点池中所有节点的付费策略为 PayAsYouGo 按量付费，PayByPeriod Saving Forecasting 为预测当前节点池所有节点全部切换为包年包月时每小时节省的成本和比例，Spot Saving Forecasting 为预测当前节点池所有节点全部切换为抢占式...
本文介绍纠删码的使用方法及使用中的常见问题。背景信息 纠删码（Erasure Coding，EC）是一种数据冗余存储机制。它能通过一定的算法将k个原始数据块计算出m个冗余数据块，只要在这 k+m 个数据块中选择任意k个数据块就能计算得到所有的原始...
若StDev很高，则同步观察相应节点的Best和Worst，来判断相应节点是否存在异常。若StDev不高，则通过Avg来判断相应节点是否存在异常。注意：上述StDev高或者不高，并没有具体的时间范围标准。而需要根据同一节点其它列的延迟值大小来进行...
Q：什么情况下会导致复制延迟增大？A：出现如下情况时会导致复制延迟增大：主节点写入负载高，产生了过多的Redo日志，导致只读节点来不及应用。只读节点负载过高，抢占了过多原本属于应用Redo日志的资源。I/O出现瓶颈，导致读写Redo日志过...
Q：什么情况下会导致复制延迟增大？A：出现如下情况时会导致复制延迟增大：主节点写入负载高，产生了过多的Redo日志，导致只读节点来不及应用。只读节点负载过高，抢占了过多原本属于应用Redo日志的资源。I/O出现瓶颈，导致读写Redo日志过...
例如，5个节点的集群，3个节点收到Binlog，2个节点未收到Binlog，此时有2个节点故障：如果故障的2个节点是收到Binlog的节点，那至少还有1个节点上有数据。如果故障的2个节点是没收到Binlog的节点，那至少还有3个节点上有数据。说明 多数派...
您可以在 性能监控 的 数据节点 页面中查看各数据分片节点的对应指标，通常情况下，若某数据分片节点（最高）的性能指标高出其他数据分片节点（最低）20%及以上时，可认为已产生数据倾斜，差值越大，数据倾斜程度越严重。下图介绍两个典型...
您可以在 性能监控 的 数据节点 页面中查看各数据分片节点的对应指标，通常情况下，若某数据分片节点（最高）的性能指标高出其他数据分片节点（最低）20%及以上时，可认为已产生数据倾斜，差值越大，数据倾斜程度越严重。下图介绍两个典型...
常见问题 为什么节点池的节点管理页签中没有目标节点，但目标节点属于集群？您可以通过以下方式移除节点。登录 容器服务管理控制台，在左侧导航栏选择 集群。在 集群列表 页面，单击目标集群名称，然后在左侧导航栏，选择 节点管理>节点。...
重跑下游操作多用于如下场景：当前实例节点的数据更新后，需要同步更新下游节点数据。实例下游节点运行失败后，需重跑下游节点。置成功继续调度 可将运行 失败 或 未运行 的脚本实例节点手动置运行成功，继续参与调度。具体操作，请参见 置...
重跑下游操作多用于如下场景：当前实例节点的数据更新后，需要同步更新下游节点数据。实例下游节点运行失败后，需重跑下游节点。置成功继续调度 可将运行 失败 或 未运行 的脚本实例节点手动置运行成功，继续参与调度。具体操作，请参见 置...
节点孤立报警 孤立节点指节点在周期任务或周期实例中展开父节点时，没有依赖任何父节点，这类型节点在自动调度时不会被调度调起，所以孤立节点不会自动调度运行，如果该孤立节点下游依赖较多，则会造成严重的后果。孤立节点产生后会自动...
如果数据同步任务执行完成后，对于数据同步质量（数据条数、数据内容）有相关疑问，在写出端您可以尝试从下列常见情况对照排查：原因 问题描述 解决方案 写出模式选择导致 Writer插件会使用选择的写出模式将源头数据在目标端执行重放，如果...
weight:1 preference:matchExpressions:key:kubernetes.io/arch operator:In values:amd64 containers:name:my-container image:nginx 常见问题 为什么配置nodeAffinity优先将Pod调度到Arm架构的节点，却调度到x86架构的ECS节点上？...
weight:1 preference:matchExpressions:key:kubernetes.io/arch operator:In values:amd64 containers:name:my-container image:nginx 常见问题 为什么配置nodeAffinity优先将Pod调度到Arm架构的节点，却调度到x86架构的ECS节点上？...
kube-scheduler是一个控制面组件，负责结合节点资源使用情况和Pod的调度要求将Pod调度到集群的合适节点上。组件介绍 基于Pod申明的Request和节点的Allocatable属性，kube-scheduler可以为调度队列中每个Pod确定其可放置的节点，并保证节点...
本文为您介绍任务未运行的相关问题。任务运行条件 任务到定时时间，为什么还没运行？使用限制 仅DataWorks生产环境运维中心支持自动调度，请确认任务是否已发布生产运维中心，任务发布，详情请参见：发布任务。任务运行条件 运维中心通过...
DataWorks的离线同步节点不支持通过自动解析自动添加调度依赖，包含离线同步节点的业务流程，如果下游节点依赖离线同步节点产生的表，您需手动添加产出表到离线同步节点的输出中，下游节点查询离线同步节点数据时，自动解析可以通过表快速...
Aurora是这个领域的开山鼻祖，实现了业内第一个一写多读的数据库，计算节点Scale up，存储节点Scale out，并将日志模块下推到存储层，计算节点之间，计算与存储节点之间传输redo日志，计算节点基于Quorum协议写多副本保证可靠性，存储层...
本文详细介绍了什么是强一致分布式事务及如何实现。ACID分布式事务 PolarDB-X 原生支持分布式事务，并保证事务的ACID性质。原子性（Atomicity）一致性（Consistency）隔离性（Isolation）持久性（Durability）PolarDB-X 通过引入中心授时...
造成服务不稳定的情况可能有很多，最常见的情况是znode数量过大或者snapshot过大，由于ZooKeeper将所有的znode维护在内存中，并且需要在节点间进行数据同步，因此过大的znode数量或者容量会对服务稳定性造成影响。ZooKeeper的定位是一个...
操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过OpenAPI或控制台等方式操作云资源时产生的管控事件，DataWorks支持在操作审计中查询的事件如下表...
由于是共享存储架构，节点间状态接近于完全同步，当一个计算节点故障时，可以快速切换到其他节点，保障了RTO。在Proxy的协同下，甚至可以做到节点切换对应用无感知 传统分布式架构与存储计算分离架构对比 分布式数据库其实已经有了不短的...
您可以根据 节点名称、节点ID、节点类型、运行日期、业务日期、调度资源组、我的节点、我今天测试的节点 和 暂停（冻结）等条件进行精确筛选。说明 默认筛选的业务日期是当前时间的前一天。任务列表 在上图的模块2区域，以列表方式展示满足...
本文为您介绍数据开发的相关问题。资源 如何在pyodps调用第三方包？如何在节点内使用资源？如何下载上传到DataWorks的资源？超过30M的资源如何上传？通过odpscmd上传的资源如何在DataWorks上使用？在DataWorks如何上传自己本地编写的jar并...
为什么需要升级集群版本 降低安全和稳定性风险：随着Kubernetes版本迭代，会不断优化及修复发现的安全及稳定性漏洞，长久使用过期版本集群会给业务带来安全和稳定性风险。享受更好的维护支持：对于过期版本，ACK Edge集群 不再提供安全补丁...
导致阿里云Elasticsearch（简称ES）的负载不均问题的原因很多，目前主要包括shard设置不合理、segment大小不均、冷热数据需求、负载均衡及多可用区架构部署的长连接不释放等。本文介绍ES集群负载不均问题的分析方法及解决方案。问题现象 ...
step2：创建离线同步节点，并配置离线同步任务 在DataWorks的DataStudio中创建一个离线同步节点，并配置离线同步的来源与去向等任务配置参数，核心配置要点如下，其他参数可保持默认值即可。详细操作请参见 通过向导模式配置离线同步任务。...
常见问题 Q：主备切换后，超过十分钟，集群状态仍未恢复运行中，可能是什么原因？如何处理？A：在发生异常触发高可用切换时，应用端长连接可能无法感知到连接状态变化，如果没有设置socket超时时间，应用程序会一直等待数据库返回结果，...
管理只读节点流量 Proxy会实时探测只读节点的状态，当出现下述情况时，Proxy会执行流量管控动作：只读节点处于异常状态：Proxy会降低该节点的服务权重，如果多次无法连接该节点，Proxy会停止该节点的服务（即不再将流量转发至该节点），待...
管理只读节点流量 Proxy会实时探测只读节点的状态，当出现下述情况时，Proxy会执行流量管控动作：只读节点处于异常状态：Proxy会降低该节点的服务权重，如果多次无法连接该节点，Proxy会停止该节点的服务（即不再将流量转发至该节点），待...
配置调度依赖时，需要根据本节点输出名称作为关联项来给任务间设置依赖关系。本文将为您介绍如何配置任务调度依赖的输入输出。配置任务的本节点输入 您可以通过以下两种方式配置本节点输入：使用代码自动解析功能，解析出任务的依赖。手动...
通过脚本模式配置离线同步节点 成功创建离线同步节点后，单击工具栏中的 转换脚本。单击 提示 对话框中的 确认，即可进入脚本模式进行开发。单击工具栏中的 导入模板。在 导入模板 对话框中，选择从来源端的LogHub数据源同步至目标端的ODPS...
本文为您介绍CDN缓存相关的常见问题。CDN缓存清理机制是什么？CDN默认的缓存规则是什么？如何判断CDN缓存是否成功？如何解决URL的传递参数为变量导致CDN缓存命中率低的问题？如何设置文件不缓存直接回源？在CDN控制台缓存过期时间设置为0，...
操作入口与通用操作指导 DataStudio侧操作 登录 MaxCompute控制台，单击控制台左侧导航的 数据开发 进入 数据开发（DataStudio）页面，可在DataStudio中新建离线同步节点或实时同步节点，开始配置离线或实时同步任务，将其他数据源数据同步...
配置离线同步节点 配置电量下降趋势数据同步节点。双击电量下降趋势数据同步节点，进入节点配置页面。选择数据来源。参数 描述 数据源 选择 MySQL>workshop。表 选择MySQL数据源中的表 trending。数据过滤 您将要同步数据的筛选条件，暂时...