DataWorks数据安全治理路线 2023年12月更新记录 时间 特性 类别 描述 产品文档 2023.12.29 新增功能 数据开发 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务,需先将已创建的数据源或集群绑定至数据开发...
兼容的数据同步工具 数据同步工具 兼容版本 说明 MySQL Slave>=5.4.11 目前不支持GTID模式复制 canal>=5.4.11 无 DTS>=5.4.11 具体操作步骤请参见 同步方案概览。debezium>=5.4.12 不支持快照能力,使用时需要关闭快照"snapshot.mode":...
1小时(相对)大批量修改SQL的列表,包括:最早执行时间 最近执行时间 PolarDB-X 实例ID 数据库 表格 执行次数 平均更新行数 平均时长(秒)SQL 修改数据统计时间 日志报表页面的所有图表都是基于不同时间段(默认为过去1小时内的)的数据...
数据统计范围 关于调度资源大盘的数据统计频率和数据统计范围说明如下:数据统计频率:每分钟统计1次。针对分配资源,取当前时间点的快照值;针对消耗资源,取过去1分钟内的峰值(即分钟内峰值)。每次页面刷新触发页面数据更新。数据统计...
等保报表:本报表参考《中国国家信息安全保护检验标准》完成设计,针对国家等级保护的检测要求进行审计数据统计梳理。旨在帮助数据库管理人员、审计人员对各种异常行为和违规操作及时发现,快速定位分析,为整体信息安全管理提供决策依据。...
本文为您介绍MaxCompute支持连接的商业智能BI工具、数据库管理工具及ETL工具。MaxCompute的生态架构如下图所示。商业智能(BI)工具 商业智能(BI)工具支持将计算引擎得到的数据通过仪表板、图表或其他图形输出实现数据可视化,以直观的...
如果您需要查看租户粒度下的全局异常数据统计概况,则单击 图标进行切换查看。实时实例页面展示当前时间的异常统计信息排行。离线实例页面默认展示运行日期为当天的统计数据。同时,您可以选择查看最近7天内的统计数据。鼠标悬停至 图标,...
调用DescribeSqlLogStatistic接口,查询DAS企业版的数据统计信息。接口说明 使用该接口需满足以下前提条件:使用阿里云或 DAS 的 SDK 时,建议使用最新版本。在使用 SDK 调用 DAS 服务时,需要将地域指定为 cn-shanghai。调试 您可以在Open...
例如,电商公司的商品维度可能有近百个维度属性,为下游的数据统计、分析、探查提供了良好的基础。尽可能多的给出包含一些富有意义的文字性描述。属性不应该是编码,而应该是真正的文字。在阿里巴巴维度建模中,通常是编码和文字同时存在,...
时间周期是用来明确数据统计的时间范围或者时间窗口,例如近1天,近1自然周。用于在统计派生指标时,限定业务统计的时间范围。本文为您介绍如何创建时间周期。背景信息 时间周期与原子指标、修饰词,共同构成一个派生指标,用于体现企业某...
如果您需要查看租户粒度下的全局异常数据统计概况,则单击 图标进行切换查看。实时实例页面展示当前时间的异常统计信息排行。离线实例页面默认展示运行日期为当天的统计数据。同时,您可以选择查看最近7天内的统计数据。鼠标悬停至 图标,...
应用层:基于实际应用需求,获取公共层加工整合后的数据,面向具体应用场景或指定产品进行的个性化数据统计。该层级仅支持使用 业务分类 视角管理模型表。未分层:如果已创建的模型表未划分层级归属(即 公共层 或 应用层),则该表会被...
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力,实现数据中台建设后半场“数据应用”的有效落地,支撑数据智能应用的高效开发。API开发 支持数据服务API。支持创建、编辑和测试API,支持的API类型包括...
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力,实现数据中台建设后半场“数据应用”的有效落地,支撑数据智能应用的高效开发。通用资源 提供了自定义函数和函数资源的能力,帮助用户在数据开发等过程中...
数据分析 SQL查询 第三方工具 数据库管理工具 通过数据库管理工具连接MaxCompute,目前主要支持DBeaver、DataGrip、SQL Workbench/J。数据库管理工具 ETL工具连接 通过ETL工具连接MaxCompute并进行开发作业调度,目前主要支持Kettle、...
本文为您介绍可视分析创作间中数据集的探查过程。前提条件 已通过上传或者连接数据库完成数据集的创建。操作步骤 输入账户和密码,登录 可视分析创作间。在左侧导航栏,单击分析图标,进入 分析 页面。选择需要探查的数据集,单击 探索,...
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力,实现数据中台建设后半场“数据应用”的有效落地,支撑数据智能应用的高效开发。API开发 支持数据服务API、三方API、数据上报API、和空间服务API。支持创建...
说明 预期优化收益是基于历史数据统计的预估值,非实时统计的准确值,仅供参考。具体操作指引 当优化类型为冷热数据优化和索引优化时,用户可以对当前优化建议采取 一键应用 操作。说明 一键应用,表示同意采纳该优化建议。一键应用 后相应...
公共字段定义规范 数据统计日期的分区字段按以下标准:按天分区:ds(YYYYMMDD)。按小时分区:hh(00~23)。按分钟:mi(00~59)。is_{业务}:表示布尔型数据字段。以 Y 和 N 表示,不允许出现空值域。原则上不需要冗余分区字段。数据冗余 一个...
面向数据资产管理者提供服务的统计分析、服务用量统计分析、热门数据统计分析能力,实现数据中台建设后半场“数据应用”的有效落地,支撑数据智能应用的高效开发。API开发 支持数据服务API、三方API、数据上报API、空间服务API。支持创建、...
本文为您介绍连接并处理MaxCompute项目数据工具的应用场景、运行环境要求以及使用指引。您可根据业务需要和相应准备的环境,选择合适的连接工具。前提条件 已创建MaxCompute项目。更多创建MaxCompute项目操作,请参见 创建MaxCompute项目。...
一、功能效果 网站管理者通过统计功能查看了解网站使用期间的数据,更好的进行针对性优化或推广。二、使用教程 统计功能包括:网站概况、渠道统计、栏目统计、产品统计、文章统计。1.网站概况 1.1 点击网站概况可以查看该网站在选择的时间...
目录 pg_statistic 存储有关数据库内容的统计数据。其中的项由ANALYZE创建,查询规划器会使用这些数据来进行查询规划。所有的统计数据天然就是近似的,即使它刚刚被更新。通常对于数据表中一个已经被 ANALYZE 过的列,在本目录中会存在一个...
本文为您介绍数据质量对象的模板类型。数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是...稳定性 实时统计值检测 实时数据为指标值或可统计数据时,用于判断数据是否正确 可选择和固定值或者历史进行对比。
本文为您介绍数据质量对象的模板类型。数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是...稳定性 实时统计值检测 实时数据为指标值或可统计数据时,用于判断数据是否正确 可选择和固定值或者历史进行对比。
移动数据分析Quick A+Digital Analytics 移动数据分析Quick A+Digital Analytics是阿里云推出的一款移动App数据统计分析产品,为开发者提供一站式数据化运营服务。当移动数据分析自带的基础分析报表不能满足App开发者的个性化需求时,App...
数据探查 内置算法:内置多种数据统计分析算法,根据不同字段类型采用不同的计算统计规则。数据标准 数据标准:是对含义相同但字段名称不同的数据进行统一规范管理的数据准则,数据标准可定义逻辑表的命名规范、字段的取值范围、度量单位等...
应用层基于实际应用需求,获取公共层加工整合后的数据,面向具体应用场景或指定产品进行的个性化数据统计。创建的模型可归属于 公共层 或 应用层,不同层级归属需单独完成如下准备:公共层:已创建数据域,用于确定模型所统计的业务数据...
2022年3月 修复栅格对部分数据统计时失败的问题。2022年3月 V1.1.20 内核小版本 类别 名称 描述 相关文档 发布时间 新增 支持表的闪回删除 新增闪回删除功能,可以快速恢复已经删除的表,以及查看和清理回收站。闪回删除 2022年1月 PX多级...
修饰词是基于选择的数据域创建的,是对数据域中的数据不同维度的修饰,用来限定统计数据的业务范围。例如,统计上海区域生鲜门店的销售金额,上海区域和生鲜门店就是对业务范围的限定修饰。前提条件 已创建数据域,用于确定修饰词所属的...
背景信息 为提高不同使用场景下的数据治理效率和质量,DataWorks为您提供以下视角:数据管理视角:在数据资产管理、数据安全加固、数据权限管理等数据管理场景下,建议您使用数据管理视角,关注查看数据管理过程中,表的统计数据、安全权限...
数据安全中心 功能集 功能 功能描述 参考文档 数据分类分级 数据资产接入 支持自动发现并接入阿里云上的数据资产。支持通过一键连接或账密连接方式连接数据库,一键接入支持:RDS、PolarDB、PolarDB-X(原DRDS)、Redis、OSS、TableStore、...
在数据库日常运维中,您可以通过查看数据库实例中计划执行、正在执行和已执行完成的性能事件(例如异常事件、优化事件、弹性伸缩事件等),及时且全面地了解数据库的性能问题及相关的运维操作。本文介绍如何通过数据库自治服务DAS的性能...
运维监控统计数据可帮助您查看最近某段时间的API运维数据,以便您更好的调整API,合理优化资源。本文为您介绍如何自定义运维监控配置。权限说明 超级管理员支持修改系统配置。数据服务系统配置入口 在Dataphin首页,单击顶部菜单栏 服务。...
修复栅格对部分数据统计时失败的问题。4.4 新特性 ST_LinearStretch:将影像进行线性拉伸,作为一个新的raster返回。ST_BuildPercentiles:统计影像的像素值百分比。ST_ComputeStatistics:一次性计算栅格数据的统计值,直方图以及百分比。...
应用表是面向具体业务场景时,用于组织相同时间周期、相同维度的多个原子指标、派生指标或统计粒度的统计数据,为后续的业务查询,OLAP分析,数据分发等提供基础。本文为您介绍如何创建应用表。前提条件 已创建数据分层。数据分层是将相同...
汇总表用于组织一个数据域下相同时间周期、相同维度的多个派生指标的统计数据,为后续的业务查询,OLAP分析,数据分发等提供基础。本文为您介绍如何创建汇总表。前提条件 已创建数据分层。数据分层是将相同功能作用的表挂载至统一的数据层...
第一次填充数据库时可能需要插入大量的数据。本节包含一些如何让这个处理尽可能高效的建议。1.禁用自动提交 在使用多个 INSERT 时,关闭自动提交并且只在最后做一次提交(在普通 SQL 中,这意味着在开始发出 BEGIN 并且在结束时发出 COMMIT...
数据服务提供了计量大屏功能,您可以通过该功能查看各类可视化图表和统计数据,包括工作空间下的API总数、总调用次数以及总执行时长用量等信息,帮助您全面了解API的调用情况。同时,您也可以针对单个API查看监控图表,获取API网关状态码、...
本文介绍 云数据库 SelectDB 版 中手动记录统计信息或者自动收集统计信息,为您进行查询性能优化提供参考。概述 云数据库 SelectDB 版 支持手动记录统计信息或者自动收集统计信息。收集统计信息有助于优化器了解数据分布特性。在进行基于...