通过创建RocketMQ数据源能够实现Dataphin读取RocketMQ的业务数据或向RocketMQ写入数据。本文为您介绍如何创建RocketMQ数据源。背景信息 RocketMQ即阿里云消息队列RocketMQ版，是阿里云基于Apache RocketMQ构建的低延迟、高并发、高可用、高...
说明 通常情况下，生产数据源和开发数据源需配置非为同一个数据源，以实现开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 实例URL 访问Salesforce...
通过创建Lindorm（宽表）数据源能够实现Dataphin读取Lindorm（宽表）的业务数据或向Lindorm（宽表）写入数据。本文为您介绍如何创建Lindorm（宽表）数据源。背景信息 Lindorm（宽表）是阿里云推出的自研数据库，提供宽表、时序、文件、搜索...
通过创建Lindorm（宽表）数据源能够实现Dataphin读取Lindorm（宽表）的业务数据或向Lindorm（宽表）写入数据。本文为您介绍如何创建Lindorm（宽表）数据源。背景信息 Lindorm（宽表）是阿里云推出的自研数据库，提供宽表、时序、文件、搜索...
通过创建DataHub数据源能够实现Dataphin读取DataHub的业务数据或向DataHub写入数据。本文为您介绍如何创建DataHub数据源。背景信息 DataHub即阿里云流式数据服务DataHub，DataHub是流式数据（Streaming Data）的处理平台，提供对流式数据的...
说明 通常情况下，生产数据源和开发数据源需配置为非同一个数据源，以实现开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 描述 LogHub Endpoint Log ...
说明 通常情况下，生产数据源和开发数据源需配置为非同一个数据源，以实现开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 说明 ES URL Elasticsearch的...
您可以通过审计日志配置，将审计日志定时同步至指定的数据源中，便于获取审计日志的数据。本文为您介绍如何进行审计日志配置。前提条件 已在元仓租户中创建用于存储审计日志的数据源（支持MySQL、Oracle、PostgreSQL、Microsoft SQL Server...
通过创建OSS数据源能够实现Dataphin读取OSS的业务数据或向OSS写入数据。本文为您介绍如何创建OSS数据源。背景信息 OSS即阿里云对象存储OSS。阿里云对象存储OSS（Object Storage Service）是一款海量、安全、低成本、高可靠的云存储服务。...
说明 通常情况下，生产数据源和开发数据源需配置为非同一个数据源，以实现开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。Sap Table数据源支持 单机、负载均衡 ...
通过创建Hudi数据源能够实现Dataphin读取Hudi的业务数据或向Hudi写入数据。本文为您介绍如何创建Hudi数据源。背景信息 Hudi即Apache Hudi，Hudi是一个通用的大数据存储系统，将核心仓库和数据库功能直接引入到数据库中，并支持记录级别的...
通过创建Vertica数据源能够实现Dataphin读取Vertica的业务数据或向Vertica写入数据。本文为您介绍如何创建Vertica数据源。背景信息 Vertica是一款基于列存储架构的数据库。如果您使用的是Vertica，在对接Dataphin进行数据开发时，您需要先...
新建Hologres数据源用于实现Dataphin能够读取Hologres的业务数据，及能够向Hologres写入数据。在引入Hologres的业务数据至Dataphin和将Dataphin的数据写入至Hologres的场景中，您需要先创建Hologres数据源。本文为您介绍如何新建Hologres...
通过创建Lindorm（计算引擎）数据源能够实现Dataphin读取Lindorm（计算引擎）的业务数据或向Lindorm（计算引擎）写入数据。本文为您介绍如何创建Lindorm（计算引擎）数据源。背景信息 Lindorm（计算引擎）是阿里云推出的自研数据库，提供宽...
通过创建Teradata数据源能够实现Dataphin读取Teradata的业务数据或向Teradata写入数据。本文为您介绍如何创建Teradata数据源。背景信息 Teradata是一款大型数据仓库系统。如果您使用的是Teradata，在对接Dataphin进行数据开发或导出...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可以根据标签给数据源进行分类...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
通过创建HDFS数据源能够实现Dataphin读取HDFS的业务数据或向HDFS写入数据。本文为您介绍如何创建HDFS数据源。背景信息 HDFS集群由NameNode和DataNode构成master-worker（主从）模式：NameNode用于构建命名空间，管理文件的元数据等。...
说明 通常情况下，生产数据源和开发数据源需配置为非同一个数据源，以实现开发数据源与生产数据源的环境隔离，降低开发数据源对生产数据源的影响。但Dataphin也支持配置成同一个数据源，即相同参数值。参数 说明 Endpoint 请输入OpenSearch...
数据开发建设 研发（数据集成、数据研发、任务发布、任务运维）资产治理管理 治理（资产清单）资产分析应用 分析（SQL查询、Notebook）更多 管理中心（权限管理）更多 我的（个人中心、个人数据中心、告警中心、消息中心、任务中心）用户...
获取用户所属空间以及预置空间角色列表 获取组织下的工作空间列表 获取指定空间角色的配置信息 获取数据源配置信息 新建数据源 修改数据源基础信息 查询数据集详情 查询用户有权查看的作品列表 根据数据集ID，查询建立在数据集之上的所有...
背景信息 Kudu提供接近于关系数据库管理系统（RDBMS）的功能和数据模型，提供类似于关系型数据库的存储结构来存储数据，允许用户以和关系型数据库相同的方式插入、更新、删除数据。Kudu仅仅是一个存储层，并不存储数据，因此需要依赖外部的...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
通过创建SelectDB数据源能够实现Dataphin读取SelectDB的业务数据或向SelectDB写入数据。本文为您介绍如何创建SelectDB数据源。背景信息 SelectDB是广泛应用于实时报表分析、即席多维分析、日志检索分析、数据联邦与查询加速等场景的数据...
通过创建API数据源能够实现Dataphin向API请求业务数据或向API请求写入数据。本文为您介绍如何创建API数据源。权限说明 仅支持拥有 新建数据源 权限点的自定义全局角色和 超级管理员、数据源管理员、板块架构师、项目管理员 系统角色创建...
通过创建MongoDB数据源能够实现Dataphin读取MongoDB的业务数据或向MongoDB写入数据。本文为您介绍如何创建MongoDB数据源。背景信息 MongoDB是一款开源的文档型数据库，它以动态的模式存储类似JSON的BSON文档，能够处理大量的非结构化数据。...
通过新建ArgoDB数据源能够实现Dataphin读取ArgoDB的业务数据或向ArgoDB写入数据。本文为您介绍如何创建ArgoDB数据源。权限说明 仅支持具备 新建数据源权限点 的自定义全局角色和 超级管理员、数据源管理员、板块架构师、项目管理员 角色...
标签平台 功能 演示 描述 标签平台 5分钟快速了解-标签平台 标签工厂通过构建从标签创建到服务的全链路，为企业数据研发团队及开发工程师提供一站式的标签开发和服务平台，适用于多种场景（如风控、营销）。标签平台具备离线、实时及服务...
通过创建API数据源能够实现Dataphin向API请求业务数据或向API请求写入数据。本文为您介绍如何创建API数据源。权限说明 仅支持拥有 新建数据源 权限点的自定义全局角色和 超级管理员、数据源管理员、板块架构师、项目管理员 系统角色创建...
标签平台 功能 演示 描述 标签平台 5分钟快速了解-标签平台 标签工厂通过构建从标签创建到服务的全链路，为企业数据研发团队及开发工程师提供一站式的标签开发和服务平台，适用于多种场景（如风控、营销）。标签平台具备离线、实时及服务...
标签平台 功能 演示 描述 标签平台 5分钟快速了解-标签平台 标签工厂通过构建从标签创建到服务的全链路，为企业数据研发团队及开发工程师提供一站式的标签开发和服务平台，适用于多种场景（如风控、营销）。标签平台具备离线、实时及服务...
OSS可以通过服务器端加密机制，为存储的静态数据提供加密保护。为防止加密规则因误操作被删除，导致数据泄露，可以使用 数据安全中心 ...重要 数据安全中心免费版不支持白名单管理功能，您需要购买数据安全中心的企业版实例，才能使用该功能。
通过创建FTP数据源能够实现Dataphin读取FTP的业务数据或向FTP写入数据。本文为您介绍如何创建FTP数据源。背景信息 文件传输协议FTP（File Transfer Protocol）是TCP/IP协议组中的一个协议。在开发网站的时候，您可以使用FTP客户端将网站...
通过创建达梦（DM）数据源能够实现Dataphin读取达梦（DM）的业务数据或向达梦（DM）写入数据。本文为您介绍如何创建达梦（DM）数据源。背景信息 达梦（DM）属于OLTP类型数据库，被集成在业务系统中。达梦（DM）数据库吸收借鉴当前先进新...
背景信息 在建设数据中台的流程中，一般的首要任务是对整个业务进行前置调研，如先盘点出参与业务的人员、事物和基本规则定义，并理清人、事、物之间的关系和发生的各种交互行为。在全面了解业务的架构和运行情况后，产出业务的概念模型。...
数据源配置 基于业务数据源是否区分生产数据源和开发数据源：如果业务数据源区分生产数据源和开发数据源，则选择 生产+开发数据源。如果业务数据源不区分生产数据源和开发数据源，则选择 生产数据源。标签 您可根据标签给数据源进行分类...
通过创建Greenplum数据源能够实现Dataphin读取Greenplum的业务数据或向Greenplum写入数据。本文为您介绍如何创建Greenplum数据源。背景信息 Greenplum是一款大数据分析引擎，适用于分析、机器学习和AI等领域。其架构主要针对管理大规模分析...
通过创建PolarDB-X2.0数据源能够实现Dataphin读取PolarDB-X2.0的业务数据或向PolarDB-X2.0写入数据。本文为您介绍如何创建PolarDB-X2.0数据源。权限说明 仅支持拥有 新建数据源 权限点的自定义全局角色和 超级管理员、数据源管理员、板块...
通过新建Paimon数据源能够实现Dataphin读取Paimon的业务数据或向Paimon写入数据。本文为您介绍如何创建Paimon数据源。权限说明 仅支持具备 新建数据源权限点 的自定义全局角色和 超级管理员、数据源管理员、板块架构师、项目管理员 角色...