概述 本文主要介绍Dataphin管道任务将逻辑表数据集成到业务数据库中时，调度配置中如何解析逻辑表任务为上游依赖。详细信息 由于Dataphin3.3版本开始，管道任务中没有自动解析的按钮，很多用户将逻辑表数据通过管道任务同步到其他业务数据...
基于MySQL生态打造的HTAP（Hybrid Transaction and Analytical Process）数据库解决方案（RDS MySQL+AnalyticDB for MySQL）有效支撑了Flowerplus的业务鲜花售卖。基于 AnalyticDB for MySQL 快速分析海量数据的结果，优化用户的采购环节、...
Lindorm采用LSM架构，可以通过Bulkload技术实现离线数据到在线数据库的高效加载并且可以将数据加载期间对在线业务请求的影响降低。通过和客户沟通了解业务日增千个字段的原因，给出合理的优化建议。客户价值 通过采用 云原生多模数据库 ...
通过Kafka导入数据 通过Flink导入数据 云数据库 SelectDB 版支持通过SelectDB提供的Flink连接器（SelectDB Connector for Apache Flink），将Kafka中的非结构化数据以及MySQL等上游业务数据库中的变更数据，实时同步到云数据库 SelectDB 版...
前提条件 已创建存储空间大于业务数据库已使用的灾备数据库，建议灾备数据库比业务数据库大10%。已在业务数据库和灾备数据库中创建用于数据同步的账号。权限要求，请参见 RDS MySQL实例间的单向同步、RDS SQL Server间的同步、云数据库...
基于X-Engine引擎的PolarDB-X集群支撑了淘宝历史订单数据库业务，解决了使用HBase数据库遗留的问题，降低存储成本的同时，满足了用户随时查询订单的需求。背景信息 阿里巴巴旗下的淘宝是中国著名的在线购物平台，活跃用户数量超过数亿人。...
数据库迁移是一项复杂且耗时的工程，您不仅需要考虑迁移过程中数据的安全性和完整性，还需要评估因数据库迁移而导致的业务中断所带来的影响。为了更快捷、更平滑地完成数据库迁移任务，您可以使用阿里云数据传输服务DTS辅助您的迁移工作，...
如果数据库业务量较大或服务器规格较低，可能会加重数据库压力，甚至导致数据库服务不可用。建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。MongoDB实例支持的版本与存储引擎请参见 版本及存储引擎，如需跨版本或跨引擎迁移，...
功能介绍 Database是PostgreSQL生态下数据库的最高级别，同一个实例中的不同Database之间无法直接互相查询数据，在保证了数据库业务隔离的同时，也带来了跨业务跨库之间联合查询的不便。在 AnalyticDB PostgreSQL版 中，您可以通过外部数据...
PolarDB-X 专注解决海量数据存储、超高并发吞吐、大表瓶颈以及复杂计算效率等数据库瓶颈问题，历经各届天猫双十一及阿里云各行业客户业务的考验，助力企业加速完成业务数字化转型。本文介绍小打卡如何通过 PolarDB-X 应对业务挑战。所属...
需求背景 某保险公司（中国前三）核心及业务系统迁移是当前保险业机构最大规模的数据库国产化改造项目。该公司依托云计算技术和互联网技术构建了分层清晰的数字化平台，推动技术架构和技术标准的统一，实现系统间整合和内通外联，同时，...
支持的迁移类型 简称说明 实例类型 简称 RDS 实例 RDS PolarDB MySQL 实例 PolarDB VPC 内自建数据库 VPC 数据库网关（Database Gateway）DG 公网 IP 自建数据库 公网 OceanBase 数据库 MySQL 租户 OB_MySQL OceanBase 数据库 Oracle 租户 ...
database.server.name=test123#需要同步的数据库和表，默认是同步所有数据库和表 database.include.list=test table.include.list=test.test_table database.history.kafka.bootstrap.servers=localhost:9092#用于存储数据库表结构变化的 ...
由于触发条件与数据变更行数和数据库年龄相关，越是在业务的高峰期，数据变更往往越多，事务ID消耗速度越快，自动清理的触发频率就越高，导致了如下问题：资源使用过高问题：在业务高峰期间自动清理进程频繁执行垃圾回收并占用大量CPU和I/O...
由于触发条件与数据变更行数和数据库年龄相关，越是在业务的高峰期，数据变更往往越多，事务ID消耗速度越快，自动清理的触发频率就越高，导致了如下问题：资源使用过高问题：在业务高峰期间自动清理进程频繁执行垃圾回收并占用大量CPU和I/O...
背景介绍 在平台类应用和系统（如电商CRM平台、仓库订单平台等）中通常需要服务多个用户，服务模型往往是围绕用户维度（用户维度可以是一个卖家或品牌，可以是一个仓库）展开的，为了支持业务系统的水平扩展性，业务数据库通常是按用户维度...
语句规则是针对SQL模板所设置的规则，可以基于安全规则帮助您更好地细化业务规则。本文介绍如何管理数据库的语句规则。背景信息 语句规则内的元素设置的越多，规则就越细化，SQL模板要满足语句规则内设置的全部条件才会命中。前提条件 已在...
业务规则 数据元业务定义。技术口径 技术层面的描述信息。操作完成后，单击 确定。在 数据元管理 页面，可查看已新建的数据元。相关操作 操作 说明 编辑数据元 在 数据元管理 页面，选择需要编辑的数据元，单击 操作 列的 编辑，可对数据元...
业务规则 数据元业务定义。技术口径 技术层面的描述信息。操作完成后，单击 确定。在 数据元管理 页面，可查看已新建的数据元。相关操作 操作 说明 编辑数据元 在 数据元管理 页面，选择需要编辑的数据元，单击 操作 列的 编辑，可对数据元...
复杂枚举规则 通过多个表达式，将表平均分配到指定的分库中：test_[1,3,6,8,9],test_[2,4,5,7,10]test_[1-9:2,10-20:2]数据库及枚举 规则 举例说明 数据库下创建相同的规则 db_[00-31].test_[[00-31]]：在32个数据库下，各创建test_[00-31]...
本文为您介绍号码隐私保护服务的业务规则。业务规则 号码隐私保护服务计价方式 更多详情，请参见 计费概述。实名制规则 号码隐私保护服务只针对企业开通此服务，需要企业实名才能开通；同时AXN隐私号依据《工信部网安函（2016）452号》的...
EXEC sys.sp_cdc_enable_db 如果数据库是Mysql 监控增量需要配置binlog服务，在Mysql机器的/etc/my.cnf的mysqld下添加如下配置：[mysqld]server-id=123 log_bin=mysql-bin binlog_format=row binlog_row_image=full expire_logs_days=10 ...
业务限定 统计的业务范围，用于筛选出符合业务规则的记录（类似于SQL中Where后的条件，不包括时间区间）。统计周期 定义派生指标的来源数据的时间跨度。例如最近1天、最近30天等（类似于SQL中Where后的时间条件）。统计粒度 统计分析的对象...
在 安全审计 页面，单击 告警规则 数据库审计规则。根据实际情况关闭不需要的规则。管理异常检测模型 DAS默认开启所有的内置异常检测模型，如果无需使用某些内置异常检测模型，您可以关闭对应模型。登录 DAS控制台。在左侧导航栏，单击 ...
环境 配置项 说明 备注 开发环境 访问身份 任务执行者 无 Hologres实例名称 下拉框可选 无 数据库名 需要绑定的DB名 实例创建后有一个名为postgres的默认DB（仅供管理用途），实际业务使用请前往 管控台 新建Database。服务器 Hologres实例...
业务限定 统计的业务范围，用于筛选出符合业务规则的记录（类似于SQL中where后的条件，不包括时间区间）。原子指标是计算逻辑的标准化定义，业务限定则是条件限制的标准化定义。统计周期 统计周期用于定义派生指标的来源数据的时间跨度。...
监控分类：数据量、主键、离散值、汇总值、业务规则和逻辑规则。监控粒度：字段级别、表级别。监控层次：ODS、CDM、ADS三层数据，其中ODS和DWD层主要偏重数据的完整性和一致性。DWS和ADS层数据量较小、逻辑复杂，偏重数据的准确性。说明 如...
监控分类：数据量、主键、离散值、汇总值、业务规则和逻辑规则。监控粒度：字段级别、表级别。监控层次：ODS、CDM、ADS三层数据，其中ODS和DWD层主要偏重数据的完整性和一致性。DWS和ADS层数据量较小、逻辑复杂，偏重数据的准确性。说明 如...
数据库审计系统提供规则配置功能，您可以根据客户端、服务端、SQL语句等特征自定义检测规则，数据库审计系统将针对不同类型规则执行是否审计或上报告警。规则说明 规则名称 应用场景 说明 过滤规则 无需审计部分SQL报文，希望节省存储空间...
用户故事是一组从角色的视角定义的业务活动结构化描述，用于细化描述流程中业务活动的触发事件、执行步骤、验收标准等业务规则。本文介绍如何新建和管理用户故事，以及如何从业务流程导入用户故事。新建用户故事 登录BizWorks，在 选择平台...
DSC 默认为数据资产提供并开启内置审计告警规则，包括数据库审计规则、OSS审计规则、MaxCompute审计规则，并支持自定义审计规则。审计告警规则可挖掘数据库运行过程中各类潜在风险和隐患，为数据库安全运行保驾护航，是等保合规利器。本文...
数据分析业务 云数据库 Memcache 版搭配大数据计算服务 MaxCompute。实现对大数据的分布式分析处理，适用于商业分析、挖掘等大数据处理场景。通过数据集成服务可自助实现数据在云数据库 Memcache 版与 MaxCompute 间的同步，简化数据操作...
背景信息 云数据库MongoDB单节点实例提供的默认数据库admin，用于管理默认数据库账号root的信息，建议使用admin之外的数据库实现业务需求（即不对admin库进行任何操作）。准备工作 下载并安装与云数据库MongoDB实例数据库版本相同的Mongo ...
数据库审计服务提供了内置掩码，您可以查看内置掩码是否符合您的数据脱敏需求。如果内置掩码无法满足需求，您可以在 敏感数据掩码 页面，单击 添加。在 添加敏感数据掩码 面板，配置敏感数据的掩码信息，单击 保存。参数 说明 名称 敏感...
本文介绍了在云盾数据库审计系统中为数据库配置安全规则的具体操作。前提条件 已添加数据库。关于添加数据库的具体操作，请参见 添加数据库。背景信息 将数据库添加到数据库审计系统后，您可以为数据库配置安全规则。当审计记录命中配置并...
如果您要防护的是非网站业务（例如App），在购买DDoS高防实例后，您需要配置端口转发规则，然后使用DDoS高防的独享IP作为您的业务IP实现业务接入，才能正式将业务流量切换到DDoS高防。本文介绍如何快速为非网站业务配置DDoS高防。背景信息 ...
如果您的主实例因连接数过多导致负载较高，或因业务需求要进行读写分离，可以使用RDS PostgreSQL数据库代理功能，该功能支持读写分离、事务拆分等能力，能够有效降低主实例访问压力，具有高可用、高性能、可运维、简单易用等特点。数据库...
数据库和应用迁移ADAM：Advanced Database&Application Migration（以下简称ADAM）是一款把数据库和应用迁移到阿里云（公共云或专有云）的产品，显著地降低了上云的技术难度和成本，尤其是Oracle数据库应用。ADAM全面评估上云可行性、成本...
业务挑战 数据库种类繁多：由于流利说业务类型多样，数据存取模型不尽相同，所以按业务类型选择了多种数据库服务，如RDS、Redis、PolarDB、HBase等，不同类型数据库的统一管控难度大。业务高速迭代，精准优化需求强烈：业务高速迭代给数据...
背景信息 云数据库MongoDB副本集实例提供的默认数据库admin，存储了实例的所有数据库账号和角色信息，建议使用admin之外的数据库实现业务需求（即不对admin库进行任何操作）。准备工作 下载并安装与云数据库MongoDB实例数据库版本相同的...