否 无 fetchSize 该配置项定义了插件和数据库服务器端每次批量数据获取条数，该值决定了数据同步系统和服务器端的网络交互次数，能够较大程度上提升数据抽取性能。说明 fetchSize 值过大（2048）可能造成数据同步进程OOM。否 1024 Writer...
Schema字段映射 默认会从日志服务的投递任务配置中获取字段，如LogStore没有配置投递任务，会默认根据最近的日志数据获取字段。支持的数据类型：BOOLEAN、INT、BIGINT、FLOAT、DOUBLE、STRING。支持同步SLS保留字段，详情请参见 保留字段。...
获取数据湖中数据表列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/dlf/v1/{catalogId}/...
连接数据库：支持连接PolarDB PostgreSQL、PolarDB Oracle、RDS PostgreSQL等数据库，获取数据库数据进行地图的创建与分析。4.（可选）SQL筛选数据 您可将数据源 转为SQL查询，以支持使用SQL筛选数据。SQL支持 Ganos语法 进行空间地理数据...
除Amazon EMR外的其他版本 Hive配置 元数据获取方式：支持 元数据库、HMS、DLF 三种源数据获取方式。获取方式不同，所需配置信息不同。元数据库 说明 当开启模块中 仅选中实时研发 时，元数据获取方式仅支持元数据库。参数 说明 数据库类型...
单元中组件的数据可由自身数据源驱动，或者从迭代器中获取。重要 迭代器的一级子图层只能是迭代单元，不能是普通组件，普通组件包含在迭代单元内。迭代器功能操作 操作 说明 生成迭代器 在画布编辑器面板中，单击 组件列表 中的一个或多个...
dlf:BatchGetTables 批量获取数据表列表。dlf:BatchUpdatePartitions 批量更新分区信息。dlf:BatchUpdateTables 批量更新数据表。dlf:CreateDatabase 创建数据库。dlf:CreateFunction 创建函数。dlf:CreatePartition 创建分区。dlf:...
从迭代器获取数据 迭代器数据响应结果应为复杂数组类型，数组的每一项数据可向内传递给子级组件。根据就近原则，迭代器内组件可获取最近一级父级迭代器的单元数据项，经过组件过滤器，得到最终的响应结果。组件从迭代器中获取数据操作步骤...
从迭代器获取数据 迭代器数据响应结果应为复杂数组类型，数组的每一项数据可向内传递给子级组件。根据就近原则，迭代器内组件可获取最近一级父级迭代器的单元数据项，经过组件过滤器，得到最终的响应结果。组件从迭代器中获取数据操作步骤...
数据管理已与操作审计服务集成，您可以在操作审计中查询用户操作数据管理产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过Open...
Resource":"*","Effect":"Allow"}]} 设置REST API所需Action Paimon REST 分类 REST API RAM鉴权Action 说明 Config GetConfig dlf:GetConfig 获取数据目录的配置。Database ListDatabases dlf:ListDatabases 查询数据库列表。...
本文为您介绍在DataV中添加ClickHouse数据源的方法，以及相关参数配置说明。前提条件 已准备好待添加的...后续步骤 获取原始数据后，可参见 组件数据源配置 进行组件数据的适配。常见问题 更多问题，请参见 数据源配置和使用常见问题。
在DataV-Note（智能分析）中基于PolarDB PostgreSQL数据制作报告前，需先将您的PolarDB PostgreSQL实例添加为DataV-Note的数据源。添加完成后，可在DataV-Note各项目中使用该数据源连接PolarDB PostgreSQL实例，访问实例数据并进行相应的...
DescribeOssObjectDetailV2 查询OSS存储对象的详细信息V2 调用本接口查询数据安全中心连接授权的OSS的单个存储对象的详细信息 DescribePackages 查询数据包的信息 调用本接口查询已完成扫描授权的MaxCompute数据包的信息，例如数据包的名称...
添加数据源：支持连接RDS MySQL、PolarDB for PostgreSQL、Hologres等数据库，获取数据库数据进行报告的创建与分析。4.编辑报告 报告的格式是Notebook分析文档，通过添加不同分析单元进行数据的分析和内容的阐述。使用 SQL查询分析，进行...
支持表级及字段级血缘展示，通过数据血缘关系，获取数据生产的全链路信息，为您解决找数难、理解数据难的问题。名词解释 元数据：是描述数据的数据（Data About Data），主要是描述数据属性的信息，用来支持如指示存储位置、历史数据、资源...
支持表级及字段级血缘展示，通过数据血缘关系，获取数据生产的全链路信息，为您解决找数难、理解数据难的问题。名词解释 元数据：是描述数据的数据（Data About Data），主要是描述数据属性的信息，用来支持如指示存储位置、历史数据、资源...
在DataV-Note（智能分析）中基于PostgreSQL数据制作报告前，需先将您的PostgreSQL实例添加为DataV-Note的数据源。添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您...
主要是通过 ods_raw_log_d_2oss_spark 节点从HttpFile数据源获取日志数据至私有OSS数据源中，再通过 ods_raw_log_d_spark 节点生成简单的日志外部表，从私有OSS数据存储中获取用户日志数据。以及通过 ods_user_info_d_2oss_spark 从MySQL...
数据库 自动获取数据库列表或自定义输入数据库名称。数据库信息填写完成后，单击 确定，系统将自动测试连接。连接成功后，新添加的数据源将显示在数据源列表中。后续步骤 数据源创建完成后，您可按需执行如下操作：使用数据源：您可进入...
主要是通过 ods_raw_log_d_2oss_spark 节点从HttpFile数据源获取日志数据至私有OSS数据源中，再通过 ods_raw_log_d_spark 节点生成简单的日志外部表，从私有OSS数据存储中获取用户日志数据。以及通过 ods_user_info_d_2oss_spark 从MySQL...
DescribeAuditHistorySessionOverview 获取概览历史会话数据。DescribeAuditLiveSessionOverview 获取概览实时会话数据。DescribeEcsRegion 获取ECS区域列表。DescribeGrant 获取授权信息。DescribeInstance 查询实例信息。...
DataV Proxy应用是一个可视化的DataV Proxy（DataV数据代理服务）配置工具，您可以通过DataV Proxy应用访问本地或内网等不对外开放且无外网访问地址的数据库，保证数据的安全性。本文档为您介绍DataV Proxy应用的启动方法和相关功能，帮助...
4 数据源管理 支持连接PolarDB PostgreSQL、PolarDB Oracle、RDS PostgreSQL等数据库，获取数据库数据进行地图的创建与分析。详情请参见 添加数据库。5 数据浏览 该功能浏览区包括数据表和地图的浏览、项目创建、数据管理等功能。在体验...
CreateDataTrackOrder-创建数据追踪工单 GetDataTrackJobDegree-获取数据追踪任务进度 GetDataTrackJobTableMeta-获取数据追踪表元数据信息 GetDataTrackOrderDetail-获取数据追踪工单详情 SearchDataTrackResult-搜索数据追踪日志解析结果...
登录数据库前，您需要先获取实例的连接地址。操作步骤 登录 云数据库专属集群控制台。在页面左上角，选择集群所在的地域。单击目标集群ID进入集群管理页面。单击左侧导航栏中的 实例列表。单击目标实例ID进入实例基本信息页面。在实例基本...
在 获取数据 页面，选择 数据库 PostgreSQL数据库，并单击 连接。在 连接 页面，填写数据库连接信息后，单击 确定。说明 若连接失败请确认数据库连接信息是否正确，检查数据库白名单是否添加Power BI所在服务器IP地址，确认无误后重新登录...
本文以阿里云RDS数据库为例，为您介绍专有网络VPC的数据源如何连通独享数据集成资源组。前提条件 购买RDS MySQL实例。本文以购买MySQL 5.7版本的MySQL实例为例，您可以根据业务需求进行配置。详情请参见 快速创建RDS MySQL实例。在目标实例...
PolarDB PostgreSQL版（兼容Oracle）提供全密态数据库功能，数据在用户侧加密后传入数据库管理系统，数据明文对于数据库服务端不可见，实现了端到端的全程加密的数据强安全性。全密态云数据库是达摩院数据库与存储实验室的自研产品，可以...
获取数据湖中数据库列表，分页查询。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/dlf/v1/{...
已获取数据表资产“dws_ren_kh_demo_di（银行客户信息表）”，具体操作，请参见 数据表。操作步骤 登录 数据资源平台控制台。在顶部菜单栏，单击（我的资产）。在左侧导航栏，选择 资产明细 我可使用的，在 我可使用的 页面，选择 数据表＞...
如果您的API使用了DataV暂不支持的数据源或接口，例如调用函数计算等，此类API也可以通过阿里云API网关中的数据源来获取数据。数据库数据源配置时报timeout，该如何处理？确认您是否已经完成 数据库白名单的配置。如果您的数据源为阿里云...
功能 描述 数据库对象评估 支持直接连接源端数据库，自动获取源端数据库对象的信息，评估源端数据库至 OceanBase 数据库对应版本的兼容性。目前支持进行对象评估的数据库类型及版本如下：Oracle 数据库：11g/12c/18c/19c MySQL 数据库：5.6...
本文介绍如何通过QlikView连接 AnalyticDB for MySQL 集群并通过QlikView构建BI系统。前提条件 安装ODBC MySQL ...使用QlikView 在QlikView中获取数据库数据后，您可以利用QlikView进行更多数据操作。如何使用QlikView，请参见 QlikView。
已获取数据表资产“dws_ren_kh_demo_di（银行客户信息表）”，具体操作，请参见 数据表。操作步骤 登录 数据资源平台控制台。在顶部菜单栏，单击（我的资产）。在左侧导航栏，选择 资产明细 我已授权的＞数据表。在 我已授权 的数据表页面...
数据湖构建已与操作审计服务集成，您可以在操作审计中查询用户操作数据湖构建产生的管控事件。操作审计支持将管控事件投递到日志服务SLS的LogStore或对象存储OSS的存储空间中，满足实时审计、问题回溯分析等需求。操作审计记录了用户通过...
数据库API ListDatabases-获取数据库列表 获取数据目录中数据库列表。RAM访问控制 操作 访问级别 资源类型 条件关键字 关联操作 dlf:ListDatabases list*全部资源*无 无 返回值 名称 类型 描述 示例值 databases array 数据目录的数据库...
重要 如果您的RDS for MySQL数据库是从经典网络切换到专有网络VPC网络的，且通过以上方法无法连通数据源，那么可以通过以下方式解决：方法一：在获取到的 VPC ID 和 实例ID 后面添加-1，再重新测试连接。如果依然无法连通，可尝试方法二。...
Java 驱动连接 OceanBase 数据库 步骤一：获取数据库连接参数 参考 获取连接参数 文档，获取相应的租户连接参数，例如：$obclient-hxxx.xxx.xxx.xxx-P3306-u a*-p*数据库连接参数包含了访问数据库所需的参数信息，在验证示例代码前，可通过...
获取数据湖具体的一个数据库的详细信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/dlf/v1/{...