使用数据服务创建API前，需先将您的数据库或数据仓库添加为DataWorks数据源，以此作为数据服务API的数据来源。开发数据服务API时，数据服务将访问该数据源获取数据表的Schema信息，帮助您进一步设置请求和返回参数。本文为您介绍如何配置...
从迭代器获取数据 迭代器数据响应结果应为复杂数组类型，数组的每一项数据可向内传递给子级组件。根据就近原则，迭代器内组件可获取最近一级父级迭代器的单元数据项，经过组件过滤器，得到最终的响应结果。组件从迭代器中获取数据操作步骤...
从迭代器获取数据 迭代器数据响应结果应为复杂数组类型，数组的每一项数据可向内传递给子级组件。根据就近原则，迭代器内组件可获取最近一级父级迭代器的单元数据项，经过组件过滤器，得到最终的响应结果。组件从迭代器中获取数据操作步骤...
本文为您介绍在DataV中添加ClickHouse数据源的方法，以及相关参数配置说明。前提条件 已准备好待添加的ClickHouse数据源。重要 您必须先将对应区域的白名单IP地址添加到您的数据源白名单中，以确保DataV-Board能正常访问您的数据库。详情请...
阿里云开放的大数据平台 E‑MapReduce(EMR)提供了多种产品形态，以满足不同用户的业务需求。根据部署方式可分为 EMR Serverless Spark、EMR Serverless StarRocks、EMR on ECS 和 EMR on ACK。为帮助用户选择合适的产品，以下整理了各产品...
概念介绍 REST API：数据链路API，基于Paimon/Iceberg REST API实现，用于数据的高效访问与操作。管控API：管控链路API，基于阿里云OpenAPI构建，用于实现高效的资源管理与运维操作。说明 如需通过DLF管控台对Catalog、库、表进行管理，您...
本教程以MySQL数据源中的用户基本信息 ods_user_info_d 表和HttpFile中的网站访问日志数据 user_log.txt 文件为例，通过数据集成离线同步任务分别同步至私有OSS中，再通过Spark SQL创建外部表来访问私有OSS数据存储。本章节旨在完成数据...
前提条件 已获取数据库的连接信息，获取方法，请参见 查看数据库连接地址。操作步骤 MyBase on ACK 打开 数据管理DMS控制台。展开左侧的 数据库实例，然后点击+。在 新增实例 对话框中，选择 他云/自建 MySQL，单击 下一步。在 基本信息 ...
本教程以MySQL数据源中的用户基本信息 ods_user_info_d 表和HttpFile中的网站访问日志数据 user_log.txt 文件为例，通过数据集成离线同步任务分别同步至私有OSS中，再通过Spark SQL创建外部表来访问私有OSS数据存储。本章节旨在完成数据...
在DataV-Board（数据看板）中使用人大金仓数据库之前，需要先将人大金仓数据库实例添加为DataV-Board的数据源。本文为您介绍如何添加人大金仓数据库。前提条件 已准备好待添加的人大金仓数据库实例信息。使用限制 仅支持DataV企业版及以上...
本文以阿里云RDS数据库为例，为您介绍专有网络VPC的数据源如何连通独享数据集成资源组。前提条件 购买RDS MySQL实例。本文以购买MySQL 5.7版本的MySQL实例为例，您可以根据业务需求进行配置。详情请参见 快速创建RDS MySQL实例。在目标实例...
GetSkillGroupServiceCapability 获取在线监控下技能组纬度服务能力数据 获取在线监控下技能组纬度服务能力数据。支持实例、时间区间、部门、技能组分组查询。GetSkillGroupAgentStatusDetails 获取技能组服务状态量 获取技能组服务状态量...
在 云数据库 Tair（兼容 Redis）集群架构实例中，若个别数据分片节点（Data Node）的内存使用率、CPU使用率或带宽使用率等性能指标远远高于其他数据分片，该集群可能已产生数据倾斜。数据倾斜严重时，会导致实例在整体内存使用率不高的情况...
本文介绍在DataV中连接数据源时，遇到的常见问题及相应的解决方法。数据库连接不成功，如何解决？请根据数据库的网络类型和所在地域，将相应的DataV服务器IP地址加入到您的数据库白名单或ECS的安全组设置中，或者使用代理工具来连接您的...
在 基础信息 区域，输入API的名称为“获取银行客户信息“、选择所属应用为“全域数据平台”、输入描述为“获取银行客户信息”。在 参数配置 区域，选择云计算资源为“dataq_dws_datahub”，选择源数据表为“yhkh1”，服务资源组选择“数据...
本文介绍如何通过QlikView连接 AnalyticDB for MySQL 集群并通过QlikView构建BI系统。前提条件 安装ODBC MySQL ...使用QlikView 在QlikView中获取数据库数据后，您可以利用QlikView进行更多数据操作。如何使用QlikView，请参见 QlikView。
由于获取的JSON数据量比较大，不支持静态数据等配置，只能通过 URL 链接来访问。下载完整 示例JSON文件。发布area_json数据文件，并获取URL。通过在线静态数据服务，将area_json发布成相应的文件，并获取URL，推荐您使用阿里云的OSS在线...
获取数据湖具体的一个数据库的详细信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/dlf/v1/{...
如果您想要新建结构相似的表或数据库，可以通过DESCRIBE语法获取原表或原数据库的结构。适用引擎 DESCRIBE语法适用于宽表引擎和时序引擎。语法 describe_statement:={ DESCRIBE|DESC }[{ DATABASE|TABLE }]identifier 差异说明 宽表引擎和...
Java 驱动连接 OceanBase 数据库 步骤一：获取数据库连接参数 参考 获取连接参数 文档，获取相应的租户连接参数，例如：$obclient-hxxx.xxx.xxx.xxx-P3306-u a*-p*数据库连接参数包含了访问数据库所需的参数信息，在验证示例代码前，可通过...
在DataV-Board（数据看板）中使用PolarDB-X数据源之前，需要先将PolarDB-X数据源实例添加为DataV-Board的数据源。本文为您介绍如何添加PolarDB-X数据源。前提条件 添加数据库前请先参见 创建PolarDB-X实例，开通对应的数据库服务。说明 ...
获取数据地图数据表的分区详情，当前仅支持MaxCompute和hms（EMR集群）类型。接口说明 需要购买 DataWorks 基础版及以上版本才能使用。目前只支持 MaxCompute、hms（EMR 集群）类型的表。调试 您可以在OpenAPI Explorer中直接运行该接口，...
当您需要对数据进行聚合计算，或需集成第三方数据，或考虑高性能、高安全性、日志监控、流量控制等因素时，可将业务数据发布为API，接入DataV-Board。本文档介绍在DataV-Board中添加API数据源的方法，以及相关参数配置说明。前提条件 重要 ...
阿里云EMR on ECS支持数据加密功能，可有效降低数据在云端的潜在安全风险。同时支持数据备份与恢复，避免数据丢失。OSS数据加密 OSS（Object Storage Service）是阿里云提供的一种高效、安全、低成本且高可靠的云存储服务。该服务采用基于...
获取数据目录详情。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/dlf/v1/catalogs/{catalog} ...
获取数据目录详情。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/dlf/v1/catalogs/id/{id} ...
DescribeDistributeTableList 获取数据库表列表。ModifyDatabaseDescription 修改数据库描述。DescribeDbList 查看实例下的数据库详情。地域 DescribeRegions 查看支持的地域和可用区。账号管理 CreateAccount 创建普通账号。...
背景信息 云数据库HBase增强版是由 云原生多模数据库Lindorm宽表引擎 提供的、完全兼容HBase的云上托管数据库，从2011年开始云数据库HBase增强版正式承载阿里内部业务的海量数据实时存储需求，支撑服务了淘宝、支付宝、菜鸟、优酷、高德等...
作为一站式大数据开发治理平台，DataWorks沉淀阿里巴巴十多年大数据建设方法论，为客户完成从入湖、建模、开发、调度、治理、安全等全链路数据湖开发治理能力，帮助客户提升数据的应用效率。迁移流程 阿里云DataWorks on EMR团队提供了完善...
我的资产以用户的视角展示自有权限或申请授权成功的数据表、数据服务API数据资产，并提供数据资产详情查看等功能，帮助用户清晰的了解在数据加工、数据分析等场景下可使用的数据资产情况。具备特定角色（如工作组管理员）的用户对一定范围...
获取数据目录存储概览。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 GET/dlf/v1/{catalogId}/storage...
MaxCompute Tunnel是MaxCompute的数据通道，您可以通过Tunnel向MaxCompute中上传或者下载数据。MaxCompute提供的 数据上传和下载工具 是基于Tunnel SDK编写的。本文将为您介绍Tunnel SDK的主要接口，不同版本的SDK在使用上有所差别，准确...
本文将介绍如何使用 HikariCP 连接池、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入、删除、更新和查询数据等。点击下载 hikaricp-mysql-client 示例工程 前提条件 您已安装 OceanBase...
ROW COLUMN+CELL r1 column=cf1:q1,timestamp=2022-09-14T16:06:34.339,value=v1 r2 column=cf1:q1,timestamp=2022-09-14T16:06:36.615,value=v3 2 row(s)获取数据 运行 get 命令获取单个行（row）或单元格（cell）的数据。您可以根据需求...
获取数据地图给定数据库的详情信息。接口说明 需要购买 DataWorks 基础版及以上版本才能使用。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权...
本产品（大数据开发治理平台 DataWorks/2024-05-18）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能...
实例开通数据共享后，还需要通过SQL创建共享并授权，才能实现实例间的数据共享。本文介绍 AnalyticDB PostgreSQL版Serverless模式 数据共享相关SQL操作。注意事项 源库和目标库所属的实例在同一地域下，且已加入数据共享。如何将实例加入...
新消息入库：sync_id=INCR bob ZADD bob$sync_id message:{type:new_message,data:"{msgid:991,cid:123,text:"hello"}"} 获取消息范围：ZRangeByScore bob 100103 100310 获取客户端设备的点位：HGETALL bob 加入或更新客户端设备信息：...
本文为您介绍在DataV中添加Open API数据源的方法，以及相关参数配置说明。Open API是阿里云提供的云产品开放接口的调用方式，使用Open API可以方便地调用各云产品提供的API接口，轻松实现控制及查询等功能。在DataV中，最常见的场景是使用...
调用此API可以获取数据湖的数据目录列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句...