数据灾备中心基于以上准则,结合阿里云存储的 SAAS 和 IAAS 层多种数据备份方案(更多信息,请参考 阿里云存储数据保护方案选型),采用了以下标准进行评分,满分为 100 分,未配置进行扣分:保护方案配置 提示信息 星级 分数范围 两种备份...
使用限制 全量读取和增量读取都是单并发,在大数据量下,全量读取会有性能瓶颈,建议通过其他方案解决。例如,离线方案。仅支持单表的数据采集,不支持多表、整库。系统按照固定频率 query,定时请求时间 需要 自行配置,如果配置的时间较...
使用限制 全量读取和增量读取都是单并发,在大数据量下,全量读取会有性能瓶颈,建议通过其他方案解决。例如,离线方案。仅支持单表的数据采集,不支持多表、整库。系统按照固定频率 query,定时请求时间 需要 自行配置,如果配置的时间较...
计算引擎类型 选择设置 计算引擎设置需要提前采购计算引擎MaxCompute资源,系统以此来支持相关数据的建设工作。需要选择计算引擎类型(目前仅开放MaxCompute计算类型),配置计算引擎所在的集群,例如Endpoint等信息。系统以此来支持该计算...
计算引擎类型 选择设置 计算引擎设置需要提前采购计算引擎MaxCompute资源,系统以此来支持相关数据的建设工作。需要选择计算引擎类型(目前仅开放MaxCompute计算类型),配置计算引擎所在的集群,例如Endpoint等信息。系统以此来支持该计算...
若您在使用智能数据建设与治理Dataphin的过程中有任何疑问,您可通过答疑支持联系我们,为您答疑解惑。人工答疑 在Dataphin页面,单击 图标,选择 答疑支持 或单击 蓝色小机器人,再单击 答疑支持,进入答疑支持页面后,输入您需解答的问题...
DIBatchDeleteAlarmRule 运维中心数据集成批量删除告警规则 DIUpdateAlarmRule 运维中心数据集成修改告警规则 DISaveSolution 数据集成主站新建或修改保存解决方案 DIDeleteSolution 数据集成主站删除解决方案 DIStartSolution 数据集成主...
跨租户发布数据用于迁移租户间的数据,以满足不同数据的应用场景,帮助企业实现数据应用价值最大化。5分钟快速了解 前提条件 已购买跨租户发布增值服务。更多信息,请参见 购买指引。进行跨租户发布前,请确保来源租户与目标租户的 ...
使用阿里云Dataphin可以实现零部署成本、零运维成本构建智能大数据研发与治理平台。使用阿里云Dataphin时,若已有的数据源部署在本地IDC机房,首先需要打通本地IDC机房与阿里云Dataphin网络。本文将介绍本地IDC机房数据源与阿里云Dataphin...
使用阿里云Dataphin可以实现零部署成本、零运维成本构建智能大数据研发与治理平台。使用阿里云Dataphin时,若已有的数据源部署在本地IDC机房,首先需要打通本地IDC机房与阿里云Dataphin网络。本文将介绍本地IDC机房数据源与阿里云Dataphin...
MaxCompute湖仓一体方案通过数据仓库MaxCompute和数据湖共同实现,将数据湖的灵活性、生态丰富能力与数据仓库的企业级部署能力进行融合,助力于构建数据湖和数据仓库相融合的数据管理平台。本文为您介绍如何通过Dataphin管理MaxCompute和...
MaxCompute湖仓一体方案通过数据仓库MaxCompute和数据湖共同实现,将数据湖的灵活性、生态丰富能力与数据仓库的企业级部署能力进行融合,助力于构建数据湖和数据仓库相融合的数据管理平台。本文为您介绍如何通过Dataphin管理MaxCompute和...
Dataphin在成都地域正式开服公告-2025年8月13日 为满足不同地域用户对数据建设、数据治理等需求,Dataphin共享模式(全托管版)在2025年8月13日新增开通西南1(成都)地域,您可以在控制台上按需求开通服务。Dataphin权限管控策略变更公告-...
说明 通常情况下,生产数据源和开发数据源需配置为非同一个数据源,以实现开发数据源与生产数据源的环境隔离,降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源,即相同参数值。参数 描述 LogHub Endpoint Log ...
当数据的业务含义存在较大差异时,您可以创建不同的数据板块,让各成员独立管理不同的业务,后续数据仓库的建设将按照数据板块进行划分。主题域 数据域即主题域,是对某个主题分析后确定的主题边界。例如,商品域、交易域、会员域等。项目 ...
当数据的业务含义存在较大差异时,您可以创建不同的数据板块,让各成员独立管理不同的业务,后续数据仓库的建设将按照数据板块进行划分。主题域 数据域即主题域,是对某个主题分析后确定的主题边界。例如,商品域、交易域、会员域等。项目 ...
同步其他数据源的数据至Impala数据源的场景中,完成源数据源的信息配置后,需要配置Impala输出组件写入数据的目标数据源。本文为您介绍如何配置Impala输出组件。前提条件 已创建Impala数据源。具体操作,请参见 创建IMPALA数据源。进行...
同步其他数据源的数据至Impala数据源的场景中,完成源数据源的信息配置后,需要配置Impala输出组件写入数据的目标数据源。本文为您介绍如何配置Impala输出组件。前提条件 已创建Impala数据源。具体操作,请参见 创建Impala数据源。进行...
同步其他数据源的数据至IBM DB2数据源的场景中,完成源数据的信息配置后,需要配置IBM DB2输出组件的目标数据源。本文为您介绍如何配置IBM DB2输出组件。前提条件 已创建IBM DB2数据源。更多信息,请参见 创建IBM DB2数据源。进行IBM DB2...
同步其他数据源的数据至GBase 8a数据源的场景中,完成源数据源的信息配置后,需要配置GBase 8a输出组件写入数据的目标数据源。本文为您介绍如何配置GBase 8a输出组件。前提条件 已创建GBase 8a数据源。更多信息,请参见 创建GBase 8a数据源...
同步其他数据源的数据至SAP HANA数据源的场景中,完成源数据的信息配置后,需要配置SAP HANA输出组件的目标数据源。本文为您介绍如何配置SAP HANA输出组件。前提条件 已创建SAP HANA数据源。更多信息,请参见 创建SAP HANA数据源。进行SAP ...
同步其他数据源的数据至Teradata数据源的场景中,完成源数据的信息配置后,需要配置Teradata输出组件的目标数据源。本文为您介绍如何配置Teradata输出组件。前提条件 已创建Teradata数据源。具体操作,请参见 创建Teradata数据源。进行...
同步其他数据源的数据至GoldenDB数据源的场景中,完成源数据源的信息配置后,需要配置GoldenDB输出组件写入数据的目标数据源。本文为您介绍如何配置GoldenDB输出组件。前提条件 已创建GoldenDB数据源。更多信息,请参见 创建GoldenDB数据源...
同步其他数据源的数据至ClickHouse数据源的场景中,完成源数据的信息配置后,需要配置ClickHouse输出组件写入数据的目标数据源。本文为您介绍如何配置ClickHouse输出组件。前提条件 在开始执行操作前,请确认您已完成ClickHouse数据源及...
当数据的业务含义存在较大差异时,您可以创建不同的数据板块,让各成员独立管理不同的业务,后续数据仓库的建设将按照数据板块进行划分。在Dataphin中,项目可以归属至数据板块以实现规范建模功能,同一个数据板块中可能包含多个不同的项目...
5分钟快速了解 背景信息 面对各行各业对大数据的应用,数据集成会有很多的诉求,包括能够简单高效地配置大量数据表的同步任务、能够集成多种异构数据源、能够实现对数据源的数据进行轻度预处理、能够实现数据同步任务的调优(例如容错、...
以数据开发建设为例,数据开发建设为菜单组;研发为一级菜单;数据集成、数据研发等为二级菜单。系统菜单默认顺序 智能工作台 超级X:X-数据工程、X-分析、X-数据标准、X-数据安全、智能应用管理、企业知识库。数据开发建设 研发:数据集成...
背景信息 MaxCompute即阿里云大数据计算服务,适用于数据分析场景的企业级SaaS(Software as a Service)模式云数据仓库,以Serverless架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化...
X-数据安全针对圈选的数据表,基于大模型进行语义分析,识别核心字段,并智能推荐对应的分类分级,您可对推荐的识别结果执行应用、弃用等操作。本文为您介绍如何使用X-数据安全。前提条件 已配置并开启X-数据安全,详情请参见 智能助手。...
通过创建Hudi数据源能够实现Dataphin读取Hudi的业务数据或向Hudi写入数据。本文为您介绍如何创建Hudi数据源。背景信息 Hudi即Apache Hudi,Hudi是一个通用的大数据存储系统,将核心仓库和数据库功能直接引入到数据库中,并支持记录级别的...
配置DM(达梦)输出组件,可以将外部数据库中读取的数据写入到DM(达梦),或从大数据平台对接的存储系统中将数据复制推送至DM(达梦),进行数据整合和再加工。本文为您介绍如何配置DM(达梦)输出组件。前提条件 已创建DM(达梦)数据源...
通过创建Impala数据源能够实现Dataphin读取Impala的业务数据或向Impala写入数据。本文为您介绍如何创建Impala数据源。背景信息 Impala是用于处理存储在Hadoop集群中大量数据的SQL查询引擎。如果您使用的是Impala,在导出Dataphin数据至...
通过创建Greenplum数据源能够实现Dataphin读取Greenplum的业务数据或向Greenplum写入数据。本文为您介绍如何创建Greenplum数据源。背景信息 Greenplum是一款大数据分析引擎,适用于分析、机器学习和AI等领域。其架构主要针对管理大规模分析...
业务调研 充分的业务调研和需求分析是数据仓库建设的基石,直接决定数据仓库能否建设成功。在数仓建设项目启动前,您需要请相关的业务人员介绍具体的业务,以便明确各个团队的分析员、运营人员的需求,沉淀出相关文档。您可以通过调查表、...
整体概述 Dataphin的数据资产功能,基于数据资产管理的规范及方法论,帮助您对数据资产进行盘点评估:支持自动化提取分析元数据,可视化构建数据资产大图,便于管理者发现与了解数据资产价值。支持对数据生产中的计算、存储、安全、应用等...
整体概述 Dataphin的数据资产功能,基于数据资产管理的规范及方法论,帮助您对数据资产进行盘点评估:支持自动化提取分析元数据,可视化构建数据资产大图,便于管理者发现与了解数据资产价值。支持对数据生产中的计算、存储、安全、应用等...
通过新建TDengine数据源能够实现Dataphin读取TDengine的业务数据或向TDengine写入数据。本文为您介绍如何创建TDengine数据源。权限说明 仅支持具备 新建数据源权限点 的自定义全局角色和 超级管理员、数据源管理员、板块架构师、项目管理员...
说明 通常情况下,生产数据源和开发数据源需配置为非同一个数据源,以实现开发数据源与生产数据源的环境隔离,降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源,即相同参数值。参数 描述 JDBC URL Presto的连接地址...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源:如果业务数据源区分生产数据源和开发数据源,则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源,则选择 生产数据源。标签 您可以根据标签给数据源进行分类...
配置Greenplum输出组件,可以将外部数据库中读取的数据写入到Greenplum,或从大数据平台对接的存储系统中将数据复制推送至Greenplum,进行数据整合和再加工。本文为您介绍如何配置Greenplum输出组件。前提条件 已创建Greenplum数据源。具体...