Dataphin是阿里巴巴集团OneData数据治理方法论内部实践的云化输出，一站式提供数据采、建、管、用全生命周期的大数据能力，以助力企业显著提升数据治理水平，构建质量可靠、消费便捷、生产安全经济的企业级数据中台。Dataphin兼容多种计算...
外部数据管理 API 标题 API概述 异构数据源管理 异构数据源管理 外部数据服务 外部数据服务 DescribeExternalDataService 获取外部数据服务详情 获取外部数据服务详情。DeleteExternalDataService 删除外部数据服务 删除外部数据服务。...
为记录数据，需要使用Excel，从组件功能区中，拖动 启动Excel 组件到“循环相似控件”之前，在启动Excel组件的属性区，点击新建Excel单选框。2.单选选择“新建Excel”后，点击浏览按钮，选择Excel要保存的位置，然后在文件名栏自定义Excel...
【问题描述】Quick BI是否支持上传EXCEL创建数据集【解决方案】支持，参考文档：https://help.aliyun.com/zh/quick-bi/user-guide/add-a-file-to-a-data-source?spm=a2c4g.11186623.0.i370 【适用于】Quick BI公共云专业版5.1.2
【问题描述】Quick BI如何将Excel的数据和数据库表的数据关联起来使用。【解决方案】可以先将Excel上传至数据源中，然后创建数据集关联数据库的表，操作参考如下文档。上传Excel：...
背景信息 ODC 的结构比对功能支持将同一项目下、同类型数据源的数据库对象结构进行对比分析，并生成变更脚本。本文档旨在介绍如何通过 ODC 提交结构比对工单以对比分析两个数据库对象结构。注意事项 链路支持：OceanBase MySQL 到 ...
资产消费是衡量数据资产最终...电子表格：面向熟练使用Excel的分析师和业务人员，具有与Excel同样的操作和效果。电子表格可以将不同工作表页（Sheet）的数据汇总为一个表格，且该表格中包含各业务汇总指标，详情请参见 创建及管理电子表格。
您可以将Excel的数据通过数据管理服务DMS（Data Management Service）导入到RDS MySQL数据库中。操作步骤 将Excel文件另存为.csv格式，并将中文或不符合数据库要求的列名修改为英文。说明 如果您的数据没有唯一的ID列，建议在最前方添加一...
说明 选择不同的类型导出时，导出数据的数量是一样的，导出数据的时间因电脑配置或数据量不同而有所差异，建议当导出50万单元格以上的Excel时，使用 纯数据导出。图片数据导出方式 当导出格式中勾选了 EXCEL 且选择了 带格式导出 时，您...
您在配置规则后，数据发现页面可以帮助您有效识别工作空间内的敏感数据。前提条件 阿里云主账号已授权阿里云主账号开通数据保护伞，详情请参见 数据保护伞。背景信息 您可以在完成敏感数据规则配置的第二天，查看数据分布情况。操作步骤 ...
使用场景 数据源 文档链接 从Kafka同步 Kafka 从Kafka同步数据 从Flink导入 Flink 使用JDBC Connector导入 从Flink SQL导入 从大数据导入/同步 DataWorks 使用DataWorks同步数据 MaxCompute 从MaxCompute外表导入（19.15.2.2）从MaxCompute...
方法一：使用DTS迁移至RDS MySQL实例 数据传输服务DTS（Data Transmission Service）是阿里云提供的实时数据流服务，支持关系型数据库（RDBMS）、非关系型的数据库（NoSQL）、数据多维分析（OLAP）等数据源间的数据交互，集数据同步、迁移...
数据访问页面为您展示基于配置规则识别出的敏感数据的访问量、访问趋势、导出量和导出明细等，帮助您掌控每一次访问敏感数据的情况。目前支持MaxCompute和EMR引擎的操作数据展示。前提条件 阿里云主账号已授权开通数据保护伞，详情请参见 ...
DataWorks支持通过配置脱敏规则将敏感数据进行脱敏，保障数据查询或存储安全。当前DataWorks支持多种脱敏场景，同时您还可根据需要自定义脱敏场景，以满足不同数据脱敏场景下的脱敏需求。本文为您介绍DataWorks数据脱敏能力及操作引导。...
消费订阅数据 根据消费客户端和数据库的类型，选择订阅数据的消费方式：使用SDK示例代码消费订阅数据 使用SDK示例代码消费PolarDB-X 1.0订阅数据 使用flink-dts-connector消费订阅数据 使用Kafka客户端消费订阅数据 结束数据订阅 释放实例...
通过本教程，您可以了解如何使用DataWorks和StarRocks产品组合进行大数据开发和分析，并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站行为...
通过本教程，您可以了解如何使用DataWorks和MaxCompute产品组合进行大数据开发和分析，并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站...
通过本教程，您可以了解如何使用DataWorks和MaxCompute产品组合进行大数据开发和分析，并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站...
上传原始数据至RDS数据源，详情请参见 将Excel的数据导入数据库。新增数据源 说明 本次实验需要创建MySQL数据源。进入管理中心页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 更多 管理中心，在下拉框中选择对应工作空间...
数据分类分级支持您按照数据的价值、内容敏感程度、影响和分发范围对数据进行敏感级别和类型的划分，不同敏感级别的数据其管控原则和数据开发要求存在差异，划分分类分级后，后续可通过分类分级管控不同程度的敏感数据。本文为您介绍如何...
数据同步功能可以帮助您实现数据源之间的数据实时同步，适用于数据异地多活、数据异地灾备、本地数据灾备、跨境数据同步、查询与报表分流、云BI及实时数据仓库等多种业务场景。本文介绍数据同步功能的具体使用流程，帮助您快速掌握创建、...
数据迁移可以帮助您实现同构或异构数据源之间的数据迁移，适用于数据上云迁移、阿里云内部跨实例数据迁移、数据库拆分扩容等业务场景。本文介绍数据迁移功能的使用流程，帮助您快速掌握创建、监控、管理数据迁移任务的操作。背景知识 迁移...
通过本教程，您可以了解如何使用DataWorks和StarRocks产品组合进行大数据开发和分析，并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站行为...
通过本教程，您可以了解如何使用DataWorks和MaxCompute产品组合进行大数据开发和分析，并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站...
通过本教程，您可以了解如何使用DataWorks和MaxCompute产品组合进行大数据开发和分析，并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站...
添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您介绍如何添加MaxCompute数据源。前提条件 已购买MaxCompute实例并创建数据库。详情请参见 开通MaxCompute和...
添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您介绍如何添加Greenplum数据源。前提条件 已购买Greenplum实例并创建数据库。已拥有工作空间。详情请参见 创建工作...
DataWorks支持将您提供的样本文件生成样本库，后续可以将样本库配置为数据识别规则用来识别数据。当需要识别的目标数据包含样本库中的数据时，则会命中该识别规则。该功能通常用于识别可以使用枚举值罗列的数据，例如，员工姓名、用户地址...
示例文件 SQL附件示例 CSV文件示例（第1行为属性）CSV文件示例（第1行为数据）Excel附件示例（第一行为属性）Excel附件示例（第一行为数据）JSON附件示例 常见问题 Q：执行数据导入时出现permission denied for schema XXXXX报错如何处理？...
购买 数据安全中心DSC（Data Security Center）实例后，在使用DSC检测ECS自建数据库中存在的敏感数据或监控数据库异常操作前，您需要先完成资产实例授权。使用限制 仅支持VPC网络中的ECS自建数据库。仅支持MySQL、SQL Server和Oracle类型的...
使用开放数据 将开放数据安装到目标工作空间的 MaxCompute 计算资源后，您可以在数据开发或数据分析模块中，基于该目标工作空间的MaxCompute计算资源，直接访问已授权的元数据视图信息。在数据地图左侧导航栏中，单击 图标，进入数据目录...
数据湖后端存储使用OSS，用户使用数据湖构建面向大数据分析和机器学习场景可以获得集中式权限管理和统一的元数据视图，更容易对接云上大数据和分析产品。什么情况下我需要使用数据湖构建？在云上有数据分析和机器学习需求，希望构建云上的...
数据量：介绍在数据库备份场景下的四个概念：数据库磁盘空间、数据文件空间、备份数据量、存储数据量。内置存储与用户OSS：从安全性、可靠性、成本、易用性、增值服务等方面介绍 数据灾备 内置存储和用户OSS的情况。产品计费 备份费用：...
数据保护伞是一款数据安全管理产品，为您提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据溯源等多种功能，帮助您快速梳理敏感数据并进行安全管控，保障数据安全。本文为您介绍数据保护伞的使用流程、使用限制等内容。使用流程...
数据保护伞的系统配置，支持设置数据水印文件的保存时间、设置是否展示MaxCompute数据的风险识别等级、设置告警信息的接收地址，以及设置是否开启实时识别敏感数据，您可根据业务需要进行配置。进入系统配置页面 进入数据保护伞。登录 ...
使用场景 最小粒度的数据输出控制 当企业需要对外提供数据时，可以使用调用API的方式，该方式可帮助用户仅暴露最小单元的数据（可控制到行级、列级）。使用API数据源进行可视化制作 在多数可视化工具中使用API数据源来分析数据，而不是对外...
数据集成 数据开发 数据分析与可视化 相关教程 说明 教程使用的计算引擎 涉及模块 使用公开数据集体进行数据查询、分析和可视化 DataWorks汇聚了丰富的官方真实数据（敏感数据已脱敏），每份数据均提供了具体业务场景的查询SQL，您可选择感...
通过本教程，您可以了解如何使用DataWorks和Spark产品组合进行大数据开发和分析，并通过用户画像分析案例体验DataWorks在数据集成、数据开发和运维中心模块方面的相关能力。案例介绍 为了更好地制定企业经营策略，现需要从用户网站行为中...
涉及功能：只读实例、数据库代理、SQL洞察和审计 使用连接池连接数据库 实践教程：使用RDS MySQL数据库代理内的连接池连接数据库 使用Python连接池DBUtils连接数据库 使用Java连接池Druid连接数据库 使用Go驱动包Go-MySQL-Driver连接数据库...
DataWorks支持StarRocks数据源，通过数据源对接EMR Serverless StarRocks，可实现EMR Serverless StarRocks的数据集成、开发、分析、数据服务等功能。本文为您介绍EMR Serverless StarRocks在DataWorks上的操作流程。背景信息 了解EMR ...