阿里云开放的大数据平台 E‑MapReduce(EMR)提供了多种产品形态，以满足不同用户的业务需求。根据部署方式可分为 EMR Serverless Spark、EMR Serverless StarRocks、EMR on ECS 和 EMR on ACK。为帮助用户选择合适的产品，以下整理了各产品...
本文档为您介绍DataV地图组件主要使用的GCJ-02坐标系和GeoJSON地理数据格式，以及通过坐标拾取器快速获取基于GCJ-02坐标位置的方法。GCJ-02坐标系 目前，DataV的地图组件主要使用GCJ-02坐标系。GCJ-02是由中国国家测绘局（G表示国家Guojia...
如上图所示：数据导入工具内部会集成MaxCompute数据通道服务Tunnel提供的SDK Client，支持分钟级高并发写入数据到Tunnel Server，由它把数据并发写入到每个Bucket的数据文件中。写入并发度可通过表属性 write.bucket.num 来配置，因此写入...
本文档为您介绍DataV地图组件主要使用的GCJ-02坐标系和GeoJSON地理数据格式，以及通过坐标拾取器快速获取基于GCJ-02坐标位置的方法。GCJ-02坐标系 目前，DataV的地图组件主要使用GCJ-02坐标系。GCJ-02是由中国国家测绘局（G表示国家Guojia...
确认查询结果为所需后，单击 运行，即可将当前数据保存为当前SQL查询的结果。AI助手 DataV-Atlas提供的智能SQL助手，支持空间数据库的SQL查询、分析、处理和优化等功能。说明 AI助手功能目前处于公测阶段，向所有用户免费开放，每位用户...
计算引擎 云原生大数据计算服务MaxCompute 本案例中，基于DataWorks使用 云原生大数据计算服务MaxCompute、开源全托管服务EMR Serverless StarRocks、开源大数据平台 E-MapReduce 或 开源全托管服务EMR Serverless Spark 中的任意一种作为 ...
通过该功能，您可将所需历史下载文件重新下载至本地使用，也可追溯历史下载记录的操作详情。前提条件 已通过如下模块执行数据下载操作：数据分析 查询下载：在数据分析中使用SQL语句查询并下载数据。详情请参见 SQL查询与分析。数据分析 ...
全密态功能可以避免非授权人员通过云平台软件或工具接触明文数据，命令行工具和DMS通过集成加密解密模块，确保数据在数据库内可用不可见（传输和存储过程中加密，仅授权用户在特定条件下可解密查看）。本文介绍如何使用命令行工具和DMS查询...
设计资源功能方法：您在使用组件右侧 配置 面板中关联了设计资源功能的配置项时，可直接在设计资源对话框中快速使用所需的设计资源内容，具体使用设计资源功能的方法请参见 素材或模型调用设计资源操作示例。说明 这种资源使用方式无需将所...
本文为您介绍SQL Server常见的几种迁移上云的方案，您可以根据数据源的位置、各方案使用的工具、各方案的优势与限制等，选择最适合您的上云方案。准备工作 已创建规格和存储空间大于等于源库的目标 RDS SQL Server 实例。创建方式，请参见 ...
在DataV-Atlas（分析地图）中基于RDS PostgreSQL数据制作分析地图前，需先将您的RDS PostgreSQL实例添加为DataV-Atlas的数据源。添加完成后，可在DataV-Atlas的各项目中使用该数据源，访问实例数据并创建数据分析地图。本文为您介绍如何...
在DataV-Atlas（分析地图）中基于PolarDB Oracle数据制作分析地图前，需先将您的PolarDB Oracle实例添加为DataV-Atlas的数据源。添加完成后，可在DataV-Atlas的各项目中使用该数据源，访问实例数据并创建数据分析地图。本文为您介绍如何...
说明 通过DataWork运维中心中，关联指定的周期调度任务，节点运行完成后，自动触发该质量监控下的质量规则 运行资源选择 执行质量规则检测所需的运行资源，默认选择该工作空间下监控表所属数据源。如选取其他数据源，需确认对应资源可对该...
本文介绍SQL Server常见的几种迁移上云的方案，您可以根据数据源的位置、各方案使用的工具、各方案的优势与限制等，选择最适合您的上云方案。准备工作 已创建规格和存储空间大于等于源库的 目标RDS SQL Server实例。在源和目标库中分别执行...
使用自定义主题 单击 自定义主题，即可按照界面指引上传所需的风格图片，系统会根据您的图片智能生成多个主题配色。说明 目前仅支持 JPEG、JPG 和 PNG 格式的图片文件。单击某个色块，拖动该色块在图片中对应的取色圈，即可调整色块的颜色...
专项工具的云数据（如Kubernetes使用情况）业务数据（如收入、用户数、交易量）其他数据或元数据，提供用云和云成本的背景信息 成本分摊、报告与分析、单位经济效益等FinOps能力将提供具体的要求，已确定在任何既定时间所需的数据来源、...
X-数据标准/X-数据安全/X-数据质量需开通对应的功能模块，其中，数据质量开通域内质量或全域质量均可使用X-数据质量。使用流程 为您介绍智能助手的使用流程：模型调用配置-智能助手配置-使用助手 助手简介 功能 描述 助手管理 模型调用配置...
X-数据标准/X-数据安全/X-数据质量需开通对应的功能模块，其中，数据质量开通域内质量或全域质量均可使用X-数据质量。使用流程 为您介绍智能助手的使用流程：模型调用配置-智能助手配置-使用助手 助手简介 功能 描述 助手管理 模型调用配置...
前提条件 需在 元数据中心 配置MySQL和Oracle数据库的采集任务才能使用数据源表权限。使用限制 仅Oracle和MySQL类型的数据源表支持申请表权限。审批流程说明 若数据表权限申请审批单生成后，修改了审批流程设置（如权限申请从开启变更为...
DataWorks 是阿里云提供的一站式大数据开发与治理平台，旨在帮助用户解决从数据接入、处理、治理到服务化的全链路数据问题。它通过一系列高度协同的功能模块，将复杂的数据工程流程化、可视化，显著降低了大数据开发的门槛。本文将为您逐一...
由于派生指标只是针对某业务活动某段时间的数据量统计，无法满足贴近用户实际使用的业务增长率、差值计算等数据的比对需求（例如，统计某业务活动的周环比增长率）。因此，DataWorks为您提供了由派生指标通过运算规则进行计算而形成的复合...
通过本教程，您可以了解如何使用DataWorks和MaxCompute产品组合进行数仓开发与分析，并通过案例体验DataWorks数据集成、数据开发和运维中心模块的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站行为中获取网站用户群体...
阿里云DataV面向高校在校生推出科研就业助力计划，免费提供DataV-Board（数据看板）与DataV-Atlas（分析地图）两款专业产品，助力学术研究与实战能力提升。本文详细说明产品功能、学术应用场景及申请流程。概述 DataV大学生科研就业助力...
尊敬的DataWorks用户：为了给您带来更为统一的产品使用体验，我们计划于 2023年10月20日 开始逐步将DataWorks内的MaxCompute、Hologres、AnalyticDB for PostgreSQL、AnalyticDB for MySQL、ClickHouse计算引擎合并入数据源管理；...
特别是数据解密操作，作为一个资源密集型操作，它会显著占用CPU、内存和I/O资源，该操作所耗费的时间与数据量成正比，因此拥有大规模数据的数据库在关闭TDE功能时可能耗时较长（例如数据库含有200 GB左右数据时，关闭TDE所需时间可能在40...
附录说明 MaxCompute认证身份与鉴权 若使用RAM用户或RAM角色在数据目录中查看MaxCompute数据，需提前获取MaxCompute相关权限。如果添加的MaxCompute数据源或项目已开启三层模型，则还需为RAM账号或RAM角色授予查看Schema元数据的权限。说明...
数据安全 数据分类 数据分级 识别结果（表粒度）密钥 必须为 跨租户发布使用人，同时需具备 超级管理员 或 系统管理员 的角色权限。建议发布顺序 根据对象之间的依赖关系，建议参考以下发布顺序来发布对象。全局（计算源-数据源-统计周期-...
数据安全 数据分类 数据分级 识别结果（表粒度）密钥 必须为 跨租户发布使用人，同时需具备 超级管理员 或 系统管理员 的角色权限。建议发布顺序 根据对象之间的依赖关系，建议参考以下发布顺序来发布对象。全局（计算源-数据源-统计周期-...
腾讯云数据库SQL Server 是 使用DTS逻辑迁移上云 使用OSS物理备份手动上云 使用SSMS工具上云 使用DTS逻辑迁移上云 Google Cloud SQL for SQL Server 是 使用SSMS工具上云 使用DTS逻辑迁移上云 说明 增量数据需使用 轮询查询CDC实例做增量...
特别是数据解密操作，作为一个资源密集型操作，它会显著占用CPU、内存和I/O资源，该操作所耗费的时间与数据量成正比，因此拥有大规模数据的数据库在关闭TDE功能时可能耗时较长（例如数据库含有200 GB左右数据时，关闭TDE所需时间可能在40...
开发阶段已经完成了代码的实现，为了发现代码问题、暴露项目风险、提升产出质量，需要进入测试阶段，通过测试用例对代码进行分析，为最终发布提供决策的依据。测试阶段的流程包括以下步骤：测试分析 根据需求阶段、设计阶段的要求，结合...
说明 您可以使用 DataWorks独享资源组计算器 预估所需规格及费用。预估规格及费用时，可进入DataWorks的 运维中心 运维大屏，查看资源运行的实例数、并发情况等信息作为参考。查看运维大屏，详情请参见 查看运维大屏。注意事项 独享数据...
MyBase 将主机资源、数据库引擎、数据库管控工具进行了解耦，使用MyBase开放版，您将拥有主机的完全管理权限、数据库内核完整的参数权限，相对于全托管数据库云服务，具备更灵活、开放的能力，可以满足您更多的需求。2024-03-30 什么是云...
分析专辑作用：将企业中庞大且分散的数据进行合理的组织，让系统更容易检索所需数据，提升数据使用的准确性，以及更加方便地管理数据。就像在没有目录的图书馆查找书籍，不仅效率低下，且容易出错，但是把书籍整理成专题书架，即方便查找，...
注意事项 标准模式工作空间，需分别创建开发环境数据源和生产环境数据源，并且开发环境数据源和生产环境数据源必须使用同一种认证模式。工作空间模式介绍，请参见 必读：简单模式和标准模式的区别。数据源认证模式，请参见 认证模式。前提...
升级数据库大版本 数据迁移 变更实例配置 按时间点将备份数据恢复至新建实例 恢复云数据库MongoDB单个或多个数据库 使用限制 单节点实例不支持增量数据迁移与同步。数据迁移方案 您可以通过以下方式迁移MongoDB数据库的数据。重要 单节点...
DM（达梦）数据源 Milvus数据源 TiDB数据源 DRDS（PolarDB-X 1.0）数据源 MongoDB数据源 TSDB数据源 Elasticsearch数据源 MySQL数据源 Vertica数据源 FTP数据源 OpenSearch数据源 TOS数据源 GBase8a数据源 Oracle数据源 HBase数据源 Graph ...
SQL Server数据库上云评估工具（Database Assessment Tool，DAT）是一款用于对自建SQL Server数据库进行评估并给出上云评估报告的自动化工具，帮助您做好上云前的分析和准备工作，使用该工具不会产生任何费用。本文介绍SQL Server上云评估...
如何在阿里云DataWorks数据集成服务通过Paimon REST将数据导入至DLF Catalog。前提条件 已创建DataWorks工作...创建数据集成任务 在DataWorks的数据集成中，支持使用Data Lake Formation 数据源，详情可参见：同步数据至Data Lake Formation。
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...