阿里云提供了多种数据保护方案，帮助您 实现高效的数据备份和灾难恢复。但如果选择了不适合的数据保护方案，不仅可能无法满足业务需求或合规要求，还可能导致不必要的成本增加。本文从资源类型出发（云服务器ECS、对象存储OSS、文件存储NAS...
MapReduce处理数据的完整流程如下：输入数据：在正式执行Map前，需要对输入数据进行分片（即将输入数据切分为大小相等的数据块），将每片内的数据作为单个Map Worker的输入，以便多个Map Worker同时工作。Map阶段：每个Map Worker读取数据...
DataWorks是一站式智能大数据开发治理平台，适配阿里云MaxCompute、E-MapReduce、Hologres、Flink、AnalyticDB、StarRocks、PAI 等数十种大数据和AI计算服务，为数据仓库、数据湖、湖仓一体、Data+AI解决方案提供全链路智能化的数据集成、...
OceanBase 客户端（OBClient）OBClient 是一个交互式和批处理查询的命令行工具，支持 OceanBase 数据库的 MySQL 模式租户和 Oracle 模式租户，可以访问 软件中心 进行下载安装。OBClient 在运行时需要指定 OceanBase 数据库租户的连接信息...
客户端 在连接 OceanBase 数据库的 Oracle 租户时，支持的客户端如下：OceanBase 客户端（OBClient）OBClient 是一个交互式和批处理查询的命令行工具，支持 OceanBase 数据库的 MySQL 模式租户和 Oracle 模式租户，可以访问 软件中心 进行...
DataWorks的费用主要由三部分构成：一是购买功能权限的版本软件费；二是运行任务的资源组费用；三是数据质量、智能监控等服务的超额费用。此外，底层MaxCompute等引擎的计算与存储成本，将产生独立的账单。计费概览 一、软件费用 重要 购买...
您可以在ECS实例中安装SSRS（SQL Server Reporting Services）报表服务器，然后基于RDS SQL Server的数据输出报表。本文介绍如何在ECS实例中安装并使用SSRS报表服务。背景信息 微软的SQL Server产品中包含SQL Server数据库引擎、Reporting ...
方案背景 华宁环球（北京）减灾与应急科技有限公司专注于自然灾害风险、灾害应急预警领域全栈数据、模型及平台研发，面向保险等行业及各级政府提供技术服务，数据及模型研发及成果应用处于行业领先水平。公司主营OpenRIS灾害风险大数据平台...
本文为您介绍在 云原生数据仓库AnalyticDB PostgreSQL版 数据库中如何使用 ANALYZE 命令手动收集统计信息。适用场景 手动收集统计信息，无需频繁使用。可在满足以下条件时，手动执行 ANALYZE 命令收集统计信息。表中超过20%数据更新...
通过创建FTP数据源能够实现Dataphin读取FTP的业务数据或向FTP写入数据。本文为您介绍如何创建FTP数据源。背景信息 文件传输协议FTP（File Transfer Protocol）是TCP/IP协议组中的一个协议。在开发网站的时候，您可以使用FTP客户端将网站...
通过创建FTP数据源能够实现Dataphin读取FTP的业务数据或向FTP写入数据。本文为您介绍如何创建FTP数据源。背景信息 文件传输协议FTP（File Transfer Protocol）是TCP/IP协议组中的一个协议。在开发网站的时候，您可以使用FTP客户端将网站...
随着业务发展，数据库系统中会积累大量访问频率很低甚至为0的数据，这些数据的积累容易导致如下问题：历史数据和最新数据存储在同一数据库系统中，导致磁盘空间不足。大量数据共享数据库系统的内存、缓存空间、磁盘IOPS等，导致性能问题。...
您可以通过DBeaver的图形界面查看数据库结构、执行SQL查询和脚本、浏览和导出数据、处理BLOB/CLOB数据以及修改数据库结构等。准备工作 开始使用DBeaver前，您需要完成以下准备工作。安装DBeaver软件。安装MySQL JDBC驱动。将安装了DBeaver...
概述 本文介绍云数据库 RDS MySQL 版如何收集表的统计信息。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改...
本文以部署在本地IDC中的MySQL为例，为您介绍数据源如何与DataWorks进行网络连通。适用场景 如果您的数据源满足以下条件，推荐使用本方案。数据源部署在本地IDC中。方案说明 数据源部署在本地IDC场景下，推荐使用VPC网络（内网）连接，使用...
在该阶段，DataWorks为您提供了数据分类分级、规范数据开发流程、企业级身份认证、开源身份隔离等多个场景的最佳实践，帮助企业做好数据安全治理的相关基础防护工作。场景一：数据分级分类 无论在任何行业，数据分级分类都是监管首要检查的...
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
子产品 文档 DataV-Board 7.0（数据看板）可视化工作台 工作空间管理 项目看板管理 三维城市构建器 画布编辑器 蓝图编辑器 组件指南 可视化应用中心 可视化演播厅 投屏预案-网页版 投屏预案-客户端版 更多操作请参见 操作指南。DataV-Board...
数据保护评分星级对照表 分数范围 星级 提示信息 95~100 分★恭喜，您的数据保护状态良好 80~94 分★您的数据保护状态还有提升空间，建议您按需优化 70~79 分★您的数据保护评分较低，建议您及时优化 61~69 分★您的数据保护评分低，建议您...
随着项目演进中，人员权限会更新，您需要及时审视人员权限合理性，提升项目数据安全。本文为您介绍权限查询要点及调整建议。背景信息 在项目创建初期，为了提升业务处理效率，通常在用户和权限管理上相对宽松。但是当项目进入稳定发展的...
产品描述 Dataphin是集产品、技术、方法论于一体的智能大数据平台建设引擎，为您提供数据引入、规范定义、建模研发、资产管理、数据服务等全链路智能数据建设及治理服务。功能 描述 Dataphin共享模式（全托管版）全托管又称公共云多租户...
新版数据订阅支持使用0.11版本至2.7版本的Kafka客户端消费订阅数据，DTS为您提供了Kafka客户端Demo，本文将介绍该客户端的使用说明。注意事项 使用本文提供的Demo消费数据时，如果采用auto commit（自动提交），可能会因为数据还没被消费完...
支持高级数据结构，具体如下：数组和Map数据 JSON数据 GIS（Geographic Information System）数据 颜色数据 功能扩展能力强，提供了多种扩展机制：扩展数据连接器 自定义数据类型 自定义SQL函数 流水线：基于Pipeline处理模型数据在处理...
return { id:'datav-hello' } 单击 导航 节点，打开右侧 配置面板，在面板的 链接地址 内，自定义输入需要跳转网页的URL地址。（可选）实现带入参数到新打开的页面的效果：增加请求参数，设置参数名为 id，参数值为 0。单击页面右上角的 ...
智能运维 在 MyBase 中管理的数据库实例，支持一键接入数据库自治服务DAS。DAS能够帮助用户消除数据库管理的复杂性及人工操作可能引发的服务故障，有效保障数据库服务稳定、安全及高效运行。数据同步 MyBase 提供主流开源数据库同步工具，...
pg_profile 是 PolarDB PostgreSQL版（兼容Oracle）支持的一款第三方插件，能够统计目标数据库中资源密集型活动，来分析和优化数据库。此扩展基于PostgreSQL的统计视图和部分社区插件，完全由PL/pgSQL编写，无需任何外部库或软件。配合 pg_...
手动收集统计信息 收集全表统计信息 ANALYZE TABLE 命令会扫描全表来收集统计信息，对于数据量大的表，全表收集统计信息需消耗更多的时间，建议在业务低峰期执行或采样收集统计信息。语法 ANALYZE TABLE[schema_name.]table_name[UPDATE...
pg_profile 是 PolarDB PostgreSQL版 支持的一款第三方插件，能够统计目标数据库中资源密集型活动，来分析和优化数据库。此扩展基于PostgreSQL的统计视图和部分社区插件，完全由PL/pgSQL编写，无需任何外部库或软件。配合 pg_cron 插件可以...
单击 页面导航 逻辑节点，进入右侧 配置面板，选择面板内 其他配置 栏下方的 链接地址，自定义输入所需跳转网页的URL地址。（可选）实现带入参数到新打开的页面的效果：增加请求参数，设置参数名为 id，参数值为 0。添加一个 串行数据处理 ...
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
过滤器 打开 过滤器，选择已创建的数据过滤器或新建数据过滤器，并配置数据过滤器脚本，实现数据的筛选功能。详情请参见 管理数据过滤器。数据响应结果 实时展示了组件所使用的数据。当组件数据源发生变化时，数据响应结果会对应展示最新的...
说明 创建数据源，数据源可以用来作为数据同步的来源或者去向，LTS支持的数据源请参见“数据源管理”。创建HBase数据迁移任务，详情请参见 HBase不停机迁移。创建数据导入任务，详情请参见 HBase数据导入。创建数据导出任务，详情请参见 ...
DataV-Board 7.0（数据看板）提供完整的可视化搭建工具链，支持接入多种数据源（例如，静态数据、CSV文件、API、RDS for MySQL等各类数据库），支持通过图形化界面轻松搭建PC看板、移动端看板等多种应用，满足企业经营分析、展示汇报、业务...
当数据请求状态变化时 当数据请求状态变化时抛出该事件，回调参数为当前状态，具体数据示例请参见画布编辑器中组件右侧配置面板数据源页签的数据响应结果区域。当链接改变时 当组件数据中的链接地址改变时抛出的事件，不需要参数。动作 ...
Navicat是一套快速、可靠且价格相宜的数据库管理工具，专为简化数据库的管理及降低系统管理成本而设。Navicat提供图形化用户界面，您可以简单、方便地创建本机到 AnalyticDB for MySQL 集群的远程连接，然后使用Navicat进行数据管理。前提...
仪表盘是 数据管理DMS 数据分析的其中一种可视化应用类型，其提供自动布局和可交互能力，您可以通过使用仪表盘来进行数据分析和制作可视化报表。本文介绍仪表盘的基本概念、功能展示及操作步骤。基本概念 仪表盘集合：仪表盘集合是用户管理...
提高开源组织版本管理效率，快速支持业务创新 更多开源软件支持 更高软件版本支持 覆盖从边缘到AI全场景 企业级的服务支持，降低运维成本，缩短故障处理时间 来自阿里云和Cloudera的7*24小时大数据专家服务支持 快速定位使用中遇到的问题，...
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
完成数据订阅任务后，您可以使用DTS提供的SDK来订阅数据变更信息。本文介绍通过SDK代码消费分布式订阅数据，支持的数据源包括PolarDB-X 1.0和DMS LogicDB。前提条件 已创建订阅实例，且实例的运行状态为 正常。更多信息，请参见 创建...
MaxCompute平台提供了丰富的数据上传下载工具，可以广泛应用于各种数据上云的应用场景，本文为您介绍三种经典数据上云场景。Hadoop数据迁移 您可使用MMA、Sqoop和DataWorks进行Hadoop数据迁移。使用DataWorks结合DataX进行Hadoop数据迁移的...