ModifyDefaultLevel 修改敏感数据的风险等级定义规则 调用本接口修改敏感数据的风险等级定义规则，包括未能识别数据的默认风险等级、归类为“敏感”的数据风险等级。ModifyRuleStatus 修改识别规则的检测功能状态 调用本接口开启或关闭敏感...
查询数据的代码说明 查询逻辑表数据。SELECT*FROM 板块英文名.逻辑表名 WHERE ds='${bizdate}';其中：板块英文名：需要查询逻辑表所在数据板块的 板块英文名。您可以在数据板块页面，查看数据板块公用英文名。说明 若为开发环境查询数据，...
查询数据的代码说明 查询逻辑表数据。SELECT*FROM 板块英文名.逻辑表名 WHERE ds='${bizdate}';其中：板块英文名：需要查询逻辑表所在数据板块的 板块英文名。您可以在数据板块页面，查看数据板块公用英文名。说明 若为开发环境查询数据，...
提升查询性能 方法 适用场景 描述 区别 使用预聚合提升查询性能 大量时间线实时聚合查询 预聚合通过使用Lindorm时序引擎提供的 数据的持续查询 功能，提前将需要查询的结果进行计算后转存到结果表，查询时指定查询结果表，即可快速查询结果...
云数据库HBase增强版支持冷热分离功能，可以将冷热数据存储在不同的介质中，有效提升热数据的查询效率，同时降低数据存储成本。背景信息 在海量大数据场景下，一张表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低，同时这...
前提条件 若您需下载即席查询的结果数据，在您开始执行操作前，请确认您已开启项目下载数据的权限，并已开启当前项目的下载（完整数据下载和样例数据下载）。具体操作，请参见 添加项目成员、数据下载配置。使用限制 未购买查询加速时，...
注意事项 若某一行数据同时包含热数据和冷数据，例如更新了部分列导致一行数据中既存在热数据又存在冷数据的场景，开启查询热数据优先功能会导致该行的查询结果分两次返回，即Scanner返回的Result集合中，对于同一个Rowkey会有两个对应的...
通过Web/钉钉等多个渠道，利用开发人员构建的查数Agent，以自然语言交互方式获取数据，实现0代码操作，只需提出问题即可获得所需结果。低门槛自助用数，专注业务决策。无需排队，无需等候，Agent全天提供服务。相关文档 快速入门 新建项目...
冷数据的判定标准如下：当前时间-数据的时间戳=冷热分界线(天)设置冷热分界线的方法 有以下两个方式设置冷热分界线：通过SQL语句在Database的创建或修改中设置冷热分界线。说明 通过SQL设置冷热分界线的方法可参见 CREATE DATABASE 或 ...
Lindorm宽表引擎在集群管理系统中提供了SQL查询入口，您可以使用SQL语法来查询Lindorm宽表数据。本节介绍通过集群管理系统查询宽表数据。前提条件 已登录目标实例的集群管理系统，具体操作请参见 登录集群管理系统。使用限制 为确保数据...
应用场景 提取并下载数据：通过SQL查询可以对计算源中的数据进行提取、聚合、过滤、排序等操作，并支持下载数据，以满足数据分析和报表生成的需求。数据可视化：通过SQL查询可以对计算源中提取的业务数据以图表的形式展示，可有效的帮助...
本文介绍冷数据的特点和适应场景，通过表格存储Tablestore和Delta Lake结合示例，演示数据的冷热分层。冷热分层可以充分利用计算和存储资源，以低成本承载更优质服务。背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和...
TSDB 提供时序数据的高效读写。对于百万数据点的读取，响应时间小于 5 秒，且最高可以支撑每秒千万数据点的写入。数据写入 TSDB 支持通过 HTTP 协议和 TSDB Java Client 两种方式进行数据写入。数据查询 TSDB 支持通过 HTTP 协议、TSDB ...
接口说明 本接口一般用于敏感数据保护概览页面各资产类型数据的查询。注意事项 此接口已废弃，不再维护。QPS 限制 本接口的单用户 QPS 限制为 10 次/秒。超过限制，API 调用将会被限流，这可能影响您的业务，请合理调用。调试 您可以在Open...
若您需下载即席查询的结果数据，在您开始执行操作前，请确认您已开启项目下载数据的权限，并已开启当前项目的下载（完整数据下载和样例数据下载）。具体操作，请参见 管理项目空间的权限和计算源、数据下载配置。使用限制 未购买查询加速时...
本文介绍数据查询的相关问题。物理表查询支持的云计算资源类型包含哪些？物理表查询支持的云计算资源类型包含哪些？目前包含的有MaxCompute、RDS MySQL、PostgreSQL、AnalyticDB PostgreSQL、AnalyticDB MySQL 3.0、SQLServer、Oracle、...
背景信息 时序数据的模型请参见 如何设计时序数据表，数据是按照时间序列来进行组织的。所以在时序数据表中，所有标记 TAG 的列（标签列）会被建立为索引列，来表示每一条数据具体所属于哪个时间序列，从而显示数据的来源。以时序数据表为...
变量 否 变量用于在仪表盘展示时，通过动态传入变量值替换数据集中SQL引用的变量，达到筛选数据的目的。SQL 是 查询数据对应的 SELECT SQL，可自由输入任意可正常执行的查询SQL。说明 如果需要在展示图表时进行数据筛选，可在SQL中引用变量...
例如，如果要查看MySQL数据源中自建数据库rt_data库中的rt_user表的数据-查MySQL表 SELECT*FROM mysql.rt_data.rt_user;联查Hive和MySQL表 SELECT DISTINCT a.id,a.name,b.rt_name FROM hive.default.hive_table a INNER JOIN mysql.rt_...
数据推送节点可将Data Studio业务流程中其他节点产生的数据查询结果，通过新建数据推送目标，将数据推送至钉钉群、飞书群、企业微信群、Teams以及邮件，便于团队成员及时接收和关注最新数据情况。背景信息 数据推送节点可以通过 节点上下文...
string 敏感数据所数据的行业分类列表，多个分类通过逗号分隔。general sensitive information ModelTags array object 数据标签列表。object 数据标签列表。Id integer 数据标签 ID。取值：101：个人敏感信息。102：个人信息。107：通用...
数据管理 数据库管理 时序数据的存储以Database为粒度进行隔离。支持通过SQL对Database的时间分区间隔、冷热分界线、数据过期时间等属性进行设置。具体操作，请参见 数据库管理。用户和权限管理 支持对时序数据的访问进行用户认证以及存储...
相关概念 模块 概念 概念解释 敏感数据识别 数据分级 数据分级是对数据的敏感等级的设定，用于对数据的敏感等级进行区分。Dataphin内置了 L1（对外公开）-L4（绝密数据）的通用数据分级；同时也支持客户根据企业情况进行自定义分级。数据...
相关概念 模块 概念 概念解释 敏感数据识别 数据分级 数据分级是对数据的敏感等级的设定，用于对数据的敏感等级进行区分。Dataphin内置了 L1（对外公开）-L4（绝密数据）的通用数据分级；同时也支持客户根据企业情况进行自定义分级。数据...
数据推送节点可将Data Studio业务流程中其他节点产生的数据查询结果，通过新建数据推送目标，将数据推送至钉钉群、飞书群、企业微信群、Teams以及邮件，便于团队成员及时接收和关注最新数据情况。原理介绍 数据推送节点，可以通过 节点上...
Spark SQL语句如下：INSERT INTO mysql_db.orders_month SELECT*FROM adb_dw.orders_month WHERE dt=${bizdate} 跨库数据加工：跨多个库的数据写入到在线库中，实现在线应用中直接查询数据的功能。示例：某电商企业的交易数据保存在MySQL...
数据资源平台覆盖数据同步、数据标准建模及数据质量检查、数据开发、数据标签体系构建，基于标签数据的群体分析、专家业务模型构建、全流程任务监控告警、数据服务化、数据资产管理等核心能力，提供标准化程度高、易用性强的一站式大数据...
简介 从数据库中检索数据的过程或命令叫做查询。在SQL里SELECT命令用于指定查询。SELECT 命令的一般语法如下：[WITH with_queries]SELECT select_list FROM table_expression[sort_specification]下面几个小节描述选择列表、表表达式和排序...
说明 例如先用指标卡图表展现交易额、UV等整体指标，再通过折线图展现交易额的增长趋势，辅以柱状图展现各个区域的交易对比情况，最后再以表格+筛选器的方式提供各区域数据的查询。设计理念 数据分析的核心概念设计分别是数据集、可视化...
逻辑数仓一键生成报表 数据灾备 优化 PolarDB MySQL版 库表恢复支持百万级海量表能力，突破原有5万表数量上限，满足误删数据的快速恢复、SaaS海量库表要求。库表恢复 08月 功能名称 变更类型 功能描述 相关文档 数据归档至专属存储 新增 ...
可以使用 元数据抽取 来识别OSS上数据的元数据信息，并存储在DLF中。最佳实践，请参见 DLF数据探索快速入门-淘宝用户行为分析。步骤三：初始化数据 初始化数据一般常见的几种情况如下：原有EMR集群，需要进行数据迁移。此时可以考虑通过 ...
在开发调试或者生产运维过程中，往往需要去HBase中查询某条数据。除了使用HBase shell来写Get、Scan请求，Lindorm insight提供了一个简单的SQL查询入口，您可以使用SQL语法来查询HBase增强版宽表数据。前提条件 已登录目标集群的集群管理...
数据共享交换：通过 数据服务 将数据封装成标准的数据API服务，或使用数据推送功能，实现数据的程序化调用。全链路数据治理：数据治理能力贯穿于整个数据流转过程，确保数据的可信、可控、可用。元数据采集会自动同步至 数据地图，便于用户...
敏感数据访问及导出情况 展示基于配置规则识别出的敏感数据的访问量、访问趋势、导出量和导出明细等，帮助您掌控每一次访问敏感数据的情况。查看数据风险 从多维度呈现了通过配置的风险识别规则命中的风险数据，方便您了解不同维度的风险...
由于二级索引的构建过程中需要回查数据，从而产生读取操作，如果您的实例已开启 冷热分离 功能，请务必关注冷存储（容量型云存储）的 限流情况。如果冷存储的读取操作受到限流，将直接影响索引的构建效率，进而可能导致写入操作出现反压...
运行记录为您保存近15天的即席查询、运行计算任务、逻辑数据表预览、派生指标冒烟测试、OpenAPI等不同对象类型的数据查询记录。本文为您介绍如何查看运行记录。查看运行记录 在Dataphin首页的顶部菜单栏，选择 研发 数据开发。在 开发 页面...
在DataV-Note（智能分析）中基于MaxCompute数据制作报告前，需先将您的MaxCompute实例添加为DataV-Note的数据源。添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您...
运行记录为您保存近15天的即席查询、运行计算任务、逻辑数据表预览、派生指标冒烟测试、OpenAPI等不同对象类型的数据查询记录。本文为您介绍如何查看运行记录。查看运行记录 在Dataphin首页的顶部菜单栏，选择 研发 数据开发。在 开发 页面...
元素 描述 表名（Table）时序表代表一系列同类时序数据的集合，例如为空气质量传感器建立一个Table，存储所有传感器的监测数据。标签（Tag）Tag描述数据源的特征，通常不随时间变化，例如传感器设备，包含设备DeviceId、设备所在的Region等...
在DataV-Note（智能分析）中基于Greenplum数据制作报告前，需先将您的Greenplum实例添加为DataV-Note的数据源。添加完成后，可在DataV-Note各项目中使用该数据源，访问实例数据并进行相应的数据查询、分析、可视化展示等操作。本文为您介绍...