Quick BI是一个基于云计算致力于大数据高效分析与展现的轻量级自助BI工具服务平台。通过对数据源的连接和数据集的创建,对数据进行即时的分析与查询;通过电子表格或仪表板功能,以拖拽的方式进行数据的可视化呈现。连入成功后,您可以在...
数据开发更简单:平台提供的各种工具产品能够极大的简化数据开发过程,缩短数据治理周期,降低数据治理成本。通过标准化、精细化、规格化的智能数据生产流程,完成流水线式的数据生产作业,提升数据资源生产效率、消除数据供应品质差异。...
数据湖库表 数据湖库表 ListDataLakeDatabase 获取数据湖的数据库列表 调用此API可以获取数据湖的数据库列表。GetDataLakeDatabase 获取数据湖的数据库信息 调用此API可以获取数据湖中的数据库信息。ListDataLakeCatalog 获取数据湖的数据...
数据编辑器是一款支持多种地理数据编辑与管理功能的小工具,本文介绍数据编辑器的详细功能。进入数据编辑器 单击 DataV.GeoAtlas地理小工具系列,打开 数据编辑器 工具页面。界面概述 数据编辑器页面分为三大主要功能面板,分别为 地图面板...
MaxCompute平台支持丰富的数据上传和下载工具(其中大部分工具已经在GitHub公开源代码,以开源社区的方式进行维护)。您可以根据实际应用场景,选择合适的工具进行数据的上传和下载。阿里云数加产品 MaxCompute客户端(Tunnel通道系列)...
数据库管理 API 标题 API概述 CreateDatabase 创建数据库 在指定租户下创建一个新的数据库。DescribeDatabases 查询数据库列表 查询租户下的数据库列表。ModifyDatabaseDescription 修改数据库描述 修改数据库的描述信息。...
本产品(大数据开发治理平台 DataWorks/2020-05-18)的OpenAPI采用 RPC 签名风格,签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK,开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能...
说明 您可以在提供数据精度的子组件右下角,查看组件自带的精度选项,并选择您所需的数据精度,选择高精度可以使数据更准确,但是数据量会较大,请谨慎选择。单击 选择范围 对话框左上角的城市列表,在列表内已有的城市选项中,选择一个...
说明 您可以在提供数据精度的子组件右下角,查看组件自带的精度选项,并选择您所需的数据精度,选择高精度可以使数据更准确,但是数据量会较大,请谨慎选择。单击 选择范围 对话框左上角的城市列表,在列表内已有的城市选项中,选择一个...
矢量数据与栅格数据是最常见的空间数据类型,广泛应用于多个领域的GIS相关应用。Ganos 具备全面的矢栅数据处理能力,依托 PolarDB PostgreSQL版 的弹性并行处理能力,其计算效率相比传统方案提升了数倍甚至数十倍。本文介绍 Ganos 提供的...
矢量数据与栅格数据是最常见的空间数据类型,广泛应用于多个领域的GIS相关应用。Ganos 具备全面的矢栅数据处理能力,依托 PolarDB PostgreSQL版(兼容Oracle)的弹性并行处理能力,其计算效率相比传统方案提升了数倍甚至数十倍。本文介绍 ...
MaxCompute支持通过DataWorks的数据集成功能将MaxCompute中的数据以离线方式导出至其他数据源。当您需要将MaxCompute中的数据导出至其他数据源执行后续数据处理操作时,您可以使用数据集成功能导出数据。本文为您介绍如何将MaxCompute的...
进入某个空间数据项目 添加图层 对话框,可以在 城市基底数据 页签,自定义选择所需的城市基底数据,在每一类选中的城市基底部数据中,单击单个虚拟对象的右下角都可以打开数据下拉列表,选择一个所需的基底数据。完成选择后,单击击右下角...
背景信息 OceanBase 开发者中心(OceanBase Developer Center,ODC)提供模拟数据功能供用户在测试数据库性能或者验证功能等需要大量模拟数据的场景下,能够快速根据表中的字段类型生成数据。本文档旨在介绍如何在工单中,根据数据库中存在...
本文为您介绍脚本模式配置离线同步任务的常见配置,各数据源配置存在一定差异,请以 数据源列表 中各数据源配置详情为准。适用范围 以下场景可使用脚本模式配置同步任务:数据源本身不支持使用向导模式配置任务。说明 数据源是否支持向导...
介绍:安全参数列表 数据保护机制 动态脱敏 备份与恢复 存储加密 常见问题:安全配置常见问题 运维管理 资源、作业管理 MaxCompute提供元数据、作业运维及资源观测工具,方便您精细化管理作业和资源。介绍:Information Schema 作业运维...
存储概览由离线作业(T+1)产生,统计当前存储对象的物理存储数据,包含所有版本的全量数据,帮助您快速了解当前存储资源使用情况及潜在问题,以便进行优化。本文为您介绍如何查看数据目录、数据库和数据表的存储概览。存储大小说明 分区...
为了加强对 PolarDB PostgreSQL版 中敏感列数据的保护,防止非授权人员通过云平台软件或数据库连接工具直接访问敏感数据的明文信息,您可以利用 数据安全中心DSC(Data Security Center)提供的列加密功能。该功能能够在确保数据在数据库内...
TPC-DS官方工具只包含SQL生成器以及单机版数据生成工具,并不适合大数据场景,所以本文教程中使用的工具和集群信息如下:Hive TPC-DS Benchmark测试工具。该工具是业界最常用的测试工具,是由Hortonworks公司开发,支持使用Hive和Spark运行...
EMR on ECS是指在ECS上运行EMR,它将EMR的大数据处理能力与ECS的弹性灵活优势相结合,使得您能够更加便捷地配置和管理EMR集群,同时支持多种开源和自研大数据组件,适用于复杂的大数据处理和分析场景。产品架构 EMR主要由四部分组成,分别...
数据备份 任务页签中展示所有执行过的备份任务概况,包括 备份集 ID、备份对象、备份方式、备份类型、可恢复时间点、开始时间、结束时间、备份时长、文件大小、执行方式、是否有效、状态 和 操作。支持根据开始时间和文件大小排序。鼠标...
本文为您介绍如何通过DataWorks的数据服务,生成并发布数据API,用于在DataV中进行调用并展示。前提条件 在开始本案例前,您需要首先完成 准备工作。背景信息 注意 按照本文档操作后,可以获取到您数据API的AppCode、AppKey和AppSecret,请...
创建 Hologres 数据目录 在Hologres数据目录管理页面,您可将已有的Hologres实例作为数据集添加到数据目录列表。单击Hologres数据目录右侧的 图标,进入添加实例页面。选择以下任一方式添加Hologres实例。通过DataWorks数据源:如需管理...
支持的ETL工具见下,可以同时参见更详细的同步方案列表 数据迁移及同步方案综述:数据传输服务(DTS):阿里云提供的实时数据同步服务,可以将其他数据源(RDS MySQL,ECS自建MySQL,PolarDB等)实时同步数据到 AnalyticDB PostgreSQL版,...
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎,为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。本文以DataWorks的部分核心功能为例,指导您使用DataWorks接入数据并进行业务处理、...
在左侧导航栏单击 数据源,然后在数据源列表单击新增数据源,根据实际情况选择数据源并配置相关连接参数。在底部资源组列表中,选择已与数据源打通网络的资源组,单击 测试连通性。说明 如果测试连通性结果为 无法通过,可使用 连通性诊断...
DataWorks是一站式智能大数据开发治理平台,适配阿里云MaxCompute、E-MapReduce、Hologres、Flink、AnalyticDB、StarRocks、PAI 等数十种大数据和AI计算服务,为数据仓库、数据湖、湖仓一体、Data+AI解决方案提供全链路智能化的数据集成、...
DataWorks的数据质量监控节点可通过配置数据质量监控规则,监控相关数据源表的数据质量(例如,是否存在脏数据)。同时,支持您自定义调度策略,周期性执行监控任务进行数据校验。本文为您介绍如何使用数据质量监控节点进行任务监控。背景...
DataWorks的Data Studio模块提供多种节点以满足不同数据处理需求:数据集成节点用于同步,引擎计算节点(如MaxCompute SQL、Hologres SQL、EMR Hive)用于数据清洗,通用节点(如虚拟节点和do-while循环节点)用于复杂逻辑处理。...
8 ClientProgramList array 否 客户端连接数据库所使用的工具列表,该参数中的 N 代表多个值的序号。string 否 客户端连接数据库所使用的工具列表,该参数中的 N 代表多个值的序号。navicat Lang string 否 请求和接收消息的语言类型。取值...
本文档将引导您完成使用阿里云数据传输服务(DTS)从MySQL数据库同步数据的全过程,整个过程可以归纳为七大核心步骤。步骤一:准备工作 在配置同步任务前,请完成以下准备工作,确保任务顺利执行。(可选)接入阿里云:请您先确保业务环境...
数据来源 操作 说明 配置同步范围 部分源端类型支持数据过滤。您可以指定一个条件(WHERE 子句,但无需填写where关键字)来筛选源端数据,任务运行时将仅同步满足该条件的数据。详情参见:场景:配置增量数据离线同步任务。为了实现增量...
数据管理是用来查看实例中的数据以及数据的组织形式,例如库表结构、数据大小、建表语句、表字段信息和数据预览的可视化工具。本文介绍如何使用 云数据库 SelectDB 版 的数据管理。前提条件 已创建 云数据库 SelectDB 版 实例。具体操作,...
MaxCompute支持的数据类型版本及各版本的数据类型列表,请参见 数据类型版本说明。DDL Data Definition Language,数据定义语言。例如创建表、创建视图等操作。更多DDL语法信息,请参见 DDL语句。DML Data Manipulation Language,数据操作...
演示视频 您可跟随各演示视频快速了解Dataphin:五分钟快速了解Dataphin Dataphin亮点功能早知道 相关文档 重要 部分功能需购买对应增值模块或仅在特定部署环境支持,详情请查看文档描述。...如何通过API构建自动补数据工具
创建云数据库MongoDB实例后,您需要通过客户端工具连接实例后才能使用实例。前提条件 已根据快速入门步骤成功 设置白名单。实例状态为 运行中。操作步骤 DMS 访问 MongoDB副本集实例列表 或 MongoDB分片集群实例列表,在上方选择资源组和...
业务规划不足、无效数据的堆积以及访问量的突增等因素,均会使实例产生大Key与热Key,如:类别 原因 大Key 在不适用的场景下使用 Tair和Redis,易造成Key的value过大,如使用String类型的Key存放大体积二进制文件型数据;业务上线前规划...
DescribeCrossRegionBackups 查询某RDS实例跨地域数据备份文件列表 该接口用于查询某RDS实例跨地域数据备份文件列表。DescribeCrossRegionLogBackupFiles 查询跨地域日志备份文件列表 该接口用于查询跨地域日志备份文件列表。...
类型 数据源 关系型数据库 云数据库RDS MySQL 云数据库RDS SQL Server 云原生数据库PolarDB MySQL版 云原生数据库PolarDB分布式版(简称“PolarDB-X”)自建MySQL数据库 自建Oracle数据库 非关系型数据库 云数据库MongoDB 云原生多模数据库...
PostgreSQL数据源为您提供读取和写入PostgreSQL双向通道的功能,方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的PostgreSQL数据同步能力支持情况。支持的版本 目前仅支持配置PostgreSQL数据源为PostgreSQL...