背景信息 MaxCompute即阿里云大数据计算服务，适用于数据分析场景的企业级SaaS（Software as a Service）模式云数据仓库，以Serverless架构提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化...
添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您介绍如何添加MaxCompute数据源。前提条件 已购买MaxCompute实例并创建数据库。详情请参见 开通MaxCompute和...
支持将以下数据源的数据进行归档：RDS MySQL PolarDB MySQL引擎 PolarDB-X AnalyticDB MySQL 3.0 RDS PostgreSQL PolarDB PostgreSQL引擎 数据归档方案对比 归档方案 性价比 数据管理的易用性 数据查询以及分析能力 使用OLTP数据库进行数据...
添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您介绍如何添加Greenplum数据源。前提条件 已购买Greenplum实例并创建数据库。已拥有工作空间。详情请参见 创建工作...
③ 编辑区 您可在编辑器中编写SQL查询代码进行数据查询。④控制台 运行SQL查询后，查询结果将在控制台为您展示，您可以在控制台中查看您的运行结果、日志、代码等信息，并且支持对运行结果进行可视化分析。具体支持的功能详情如下：运行...
③ 编辑区 您可在编辑器中编写SQL查询代码进行数据查询。④控制台 运行SQL查询后，查询结果将在控制台为您展示，您可以在控制台中查看您的运行结果、日志、代码等信息，并且支持对运行结果进行可视化分析。具体支持的功能详情如下：运行...
当项目用户具备查询E-MapReduce项目中的某些敏感数据权限，担忧不希望用户能看到完整的敏感数据信息时，可以对查询结果进行数据动态脱敏。本文为您介绍如何开启E-MapReduce的动态脱敏功能，并提供参考示例。使用限制 EMR集群仅支持数据保护...
DataWorks支持通过配置脱敏规则将敏感数据进行脱敏，保障数据查询或存储安全。当前DataWorks支持多种脱敏场景，同时您还可根据需要自定义脱敏场景，以满足不同数据脱敏场景下的脱敏需求。本文为您介绍DataWorks数据脱敏能力及操作引导。...
云原生数据仓库 AnalyticDB MySQL 版 Paging Cache功能，通过缓存机制提高了使用 LIMIT、OFFSET 和 ORDER BY 的大数据量分页查询效率，可以解决深分页查询的性能问题和资源瓶颈。本文介绍了如何在分页查询中使用Paging Cache功能。前提条件...
Lindorm宽表经常会被应用在大数据链路中，如果写入链路出现问题，则可能导致写入延迟或无法正常写入数据，此时进行数据查询，该行数据还未写入，因此会产生无法查询到数据的情况。如果您在使用中遇到数据写入一段时间后才能查到的情况，...
作为工作空间的管理者，在使用数据开发（DataStudio）时，您可以针对用户的开发行为实施有效的管控措施，进行开发流程、数据安全、审计等相关操作，本文将帮助您快速掌握DataStudio的相关功能，实现对数据开发过程的有效管控。背景信息 ...
数据查询时机过早 在同步任务完成前进行数据查询。部分数据源（如Hive、MaxCompute（可配））的数据在任务结束前可能部分或完全不可见。始终在确认同步任务实例成功运行后，再对目标表进行数据查询和校验。节点依赖缺失 下游分析任务与上游...
本文为您介绍如何通过析言GBI连接 云原生数据仓库 AnalyticDB PostgreSQL 版，并使用自然语言完成数据分析。前提条件 已创建 云原生数据仓库 AnalyticDB PostgreSQL 版 实例。实例内核小版本需为V6.3.10.3及以上。如何查看内核小版本请参见...
添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您介绍如何添加Hologres数据源。前提条件 已购买Hologres实例并创建数据库。详情请参见 购买Hologres、创建数据库。已...
借助MCQA 2.0的资源隔离能力，同时构建批处理资源组（QuotaA组）与交互式资源组（QuotaB组），从而实现MaxCompute中增全量数据的写入与更新，并同时进行交互式查询分析。此外，通过使用TopConsole和DataWorks Notebook，从开发者、项目和...
添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您介绍如何添加PolarDB MySQL数据源。前提条件 添加数据库前请先参见 创建PolarDB MySQL版数据库集群，开通对应的数据...
添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您介绍如何添加AnalyticDB MySQL数据源。前提条件 已购买AnalyticDB MySQL实例并创建数据库。详情请参见 快速创建...
资源组 选择一个DataWorks Serverless资源组名称，用于在后续会话中使用该资源组访问数据源以进行数据查询。测试连通性 测试目标DataWorks Serverless资源组和当前数据源之间的连通性。选择目标表 选择目标表 配置完 基本信息 后，单击 下...
添加完成后，可在DataV-Note各项目中使用该数据源连接PolarDB PostgreSQL实例，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您介绍如何添加PolarDB PostgreSQL数据源。前提条件 添加数据库前请先参见 创建数据库集群...
添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您介绍如何添加AnalyticDB PostgreSQL数据源。前提条件 添加数据库前请先参见 创建AnalyticDB PostgreSQL实例，开通...
上述SQL第4条查询失败，该用户dlf_dba_dev不具备db_b数据库的数据查询权限。总结 以上示例演示了一个简单业务场景下如何运用DLF进行数据授权的操作步骤。您可以根据具体业务需求，灵活配置DLF数据权限，以授予不同用户访问和操作各类资源的...
相关概念 API（Application Programming Interface，应用程序编程接口）：API是让应用、软件、系统能够面向数据源进行数据交互的接口，数据服务API支持“读数据”的操作，可以从数据库、数据表中不断地进行数据查询。函数：作为API过滤器，...
相关概念 API（Application Programming Interface，应用程序编程接口）：API是让应用、软件、系统能够面向数据源进行数据交互的接口，数据服务API支持“读数据”的操作，可以从数据库、数据表中不断地进行数据查询。函数：作为API过滤器，...
添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您介绍如何添加RDS MySQL数据源。前提条件 添加数据库前请先参见 创建RDS MySQL实例，开通对应的数据库服务并添加白...
添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您介绍如何添加PostgreSQL数据源。前提条件 添加数据库前请先参见 创建PostgreSQL实例，开通对应的数据库服务并添加白...
主要包括以下场景：敏感数据查询脱敏 当使用即席分析、代码任务、数据预览等功能，查看被保护的敏感数据时，敏感数据会按照已经配置的脱敏策略进行脱敏展示，从而保证敏感数据不泄露。生产环境敏感数据写入开发环境脱敏 当因为测试需要等...
主要包括以下场景：敏感数据查询脱敏 当使用即席分析、代码任务、数据预览等功能，查看被保护的敏感数据时，敏感数据会按照已经配置的脱敏策略进行脱敏展示，从而保证敏感数据不泄露。生产环境敏感数据写入开发环境脱敏 当因为测试需要等...
通过使用加速服务，您可以在调用API时提高数据查询的速率和性能。本文为您介绍两种加速方案的使用方法。背景信息 DataWorks数据服务的加速方案有两种：加速服务 和 MCQA，您可以 点击这里 加入DataWorks用户钉群进行咨询。两种方案的对比...
说明 冷热分离表中的冷区只是用来归档数据，查询请求应该非常的少，用户查询冷热分离表的绝大部分请求应该带上HOT_ONLY的标记（或者设置的TimeRange只在热区）。如果用户有大量请求需要去查冷区数据，则可能得考虑COLD_BOUNDARY冷热分界线...
统一服务为用户提供了数据中台建设过程中的数据服务化能力，面向数据开发者提供覆盖各个加工阶段统一体验的、便捷的数据查询转服务、服务管理、服务运维能力；面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析...
批量和实时导入数据 批量导入：适用于大数据量导入的场景，导入过程中可以查询旧数据，导入操作完成后一键切换新数据。导入失败时，支持回滚新数据，不影响查询旧数据。例如，从MaxCompute、OSS中导入数据到 AnalyticDB MySQL版 时，推荐...
统一服务为用户提供了数据中台建设过程中的数据服务化能力，面向数据开发者提供覆盖各个加工阶段统一体验的、便捷的数据查询转服务、服务管理、服务运维能力；面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析...
新增数据查询节点、赋值节点以及其他数据处理节点，实现对测试数据处理与查询。说明 准备测试数据节点与数据处理查询节点，在实际业务中可以根据实际情况进行调整，本案例以MySQL节点为例进行数据的推送。新增数据推送节点，接收数据查询...
任务开发上线之后，数据正在稳定生产中，您需要对对应的业务表通过可视化查看、自动的数据质量监控、敏感数据管理等多种不同方式进行治理，而以下这些模块就可以很好的帮助您对数据进行治理。可视化元数据管理 数据地图可以可视化的查看表...
支持资源组的资源类型 大数据开发治理平台DataWorks支持资源组的资源类型如下表所示：云服务 云服务代码 资源类型 大数据开发治理平台DataWorks dide Proyek:大数据开发治理平台DataWorks dide dwresourcegroup:DataWorks资源组 大数据开发...
Dataphin分析平台提供专注高效的SQL查询能力与丰富的数据可视化能力。本文为您介绍如何基于Dataphin分析平台新建SQL查询。操作步骤 在Dataphin首页，在顶部菜单栏选择 分析 SQL查询。在 SQL查询 列表中，单击 新建图标。在 新建SQL查询 ...
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
更多详情，请参加 通用数据查询与管理。同时，数据地图支持以 数据目录 方式查看数据源的表和数据集。元数据详情 在数据地图检索到目标对象之后，单击目标对象名称跳转至详情页面。对于表，查看表的 基础信息、产出信息 和 血缘信息 等信息...
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
Dataphin分析平台提供专注高效的SQL查询能力与丰富的数据可视化能力。本文为您介绍如何基于Dataphin分析平台新建SQL查询。操作步骤 在Dataphin首页，在顶部菜单栏选择 分析 SQL查询。在 SQL查询 列表中，单击 新建图标。在 新建SQL查询 ...