稳定性建设

_相关内容

批量创建质量规则

稳定性:包含 表稳定性校验、表波动性校验、字段稳定性校验 和 字段波动性校验。自定义SQL:包含自定义SQL规则模板创建的信息。指标 支持的规则模板为 唯一性、稳定性。更多模板详情请参见 模板类型说明。唯一性:包含 字段分组个数校验 和...

批量创建质量规则

稳定性:包含 表稳定性校验、表波动性校验、字段稳定性校验 和 字段波动性校验。自定义SQL:包含自定义SQL规则模板创建的信息。指标 支持的规则模板为 唯一性、稳定性。更多模板详情请参见 模板类型说明。唯一性:包含 字段分组个数校验 和...

支持计划-服务报告

2.服务范围 服务范围包含:面向IT系统范围包括 阿里云 资源以及依托云资源建设的IT系统,包括高可用巡检、高可用防护、高可用架构,年度服务报告包含但不限于-过去一年稳定性大事件回顾。稳定性工作总结。新财年稳定性工作规划。面向客户在...

公告

2023年01月18日-Dataphin新版本发布 Dataphin于2023年01月18日发布V3.7版本,进一步增强资产建设易用、拓展资产治理完备、提升基础能力开放。相比较历史版本:新增开发环境任务运行记录查看功能,优化逻辑表创建体验,集成任务支持...

平衡业务目标与成本

企业需要选择合适的云产品及资源规格满足业务诉求,在应用负载的设计及资源选择过程中除了成本还应考虑稳定性、性能、安全合规、运营效率等方面的要求,在各项目标与成本之间进行权衡。适合业务的应用负载设计并不意味着只追求低成本,首先...

元数据仓库共享模型概述

元仓共享模型是基于Dataphin内部的系统元数据表,通过任务加工生成的可以被稳定、标准化访问的开放元数据表,可降低对系统元数据表的依赖,提升系统稳定性。基于开放的元数据信息,您可以结合业务场景进行二次开发,以更好地满足对下游业务...

产品简介

深度巡检:基于阿里云大数据产品,提供深层次的诊断与咨询建议,如实例参数配置调优、计算/存储资源优化、稳定性风险排查与解决策略等服务,从而提升大数据平台的稳定性与使用率。预案演练:帮助客户在阿里云大数据平台上进行核心业务无损...

挑战和注意事项

性能的权衡 设计业务系统时,平衡性能优化与其他制约因素是一个重点,主要因素如成本、稳定性、安全、可运维性等。成本:性能与成本的关系通常不是线性的,各瓶颈点的性能突破往往意味着阶梯式的成本增加,而不同产品或产品类型之间成本...

资产质量概述

支持对 指标 的字段分组个数、字段重复值个数、字段稳定性及字段波动性进行监控、异常报警及整改。支持对 数据源 的连通性和表结构异动进行监测、异常报警及整改。支持对 实时元表 进行统计值检测、实时离线对比和实时多链路对比、异常报警...

资产质量概述

支持对 指标 的字段分组个数、字段重复值个数、字段稳定性及字段波动性进行监控、异常报警及整改。支持对 数据源 的连通性和表结构异动进行监测、异常报警及整改。支持对 实时元表 进行统计值检测、实时离线对比和实时多链路对比、异常报警...

数据服务概述

数据安全和查询性能无法保障:在数据接口开发时往往只考虑数据的获取性,数据资源访问安全性和数据访问的稳定性考虑少。维护成本高:缺乏线上平台化管理,异常情况无法监控告警,线上业务问题暴露后再排查代码修复上线。数据服务价值 为了...

开通Dataphin

增值功能包 智能运维(选购)智能运维包含 基线监控 及 限流配置 功能,为业务数据产出时效性及系统稳定性提供保障,同时能降低人工运维成本,提升运维效率。系统默认赠送 3条基线+1条限流(免费),如果您希望开通更高规格,可选择:10条...

步骤二:规划数仓

业务负责人 为板块数据的业务使用稳定性负责,可根据需要进行选择。数据负责人 为板块数据生产质量保障负责,可根据需要进行选择。单击 确定。步骤二:创建 MaxCompute 计算源 按照下图操作指引,进入 新建计算源 页面。在 新建计算源 页面...

步骤二:规划数仓

业务负责人 为板块数据的业务使用稳定性负责,可根据需要进行选择。数据负责人 为板块数据生产质量保障负责,可根据需要进行选择。单击 确定。步骤二:创建 MaxCompute 计算源 按照下图操作指引,进入 新建计算源 页面。在 新建计算源 页面...

设计原则

数据的可用性:保证数据在任何时候都能够被访问和使用,确保业务的连续性和稳定性。业界衡量因数据带来的故障会用到两个指标:RPO(Recovery Point Objective)即数据恢复点目标,以时间为单位,即在灾难发生时,系统和数据必须恢复的时间...

安全白皮书概述

Dataphin面向各行各业大数据建设、管理及应用诉求,一站式提供从数据接入到数据消费全链路的智能数据建设与资产治理的大数据能力,包括产品、技术和方法论等,可帮助企业一站式构建生产经济、质量可靠、安全稳定、消费便捷的企业级数据资产...

用户角色和权限

负责业务板块数据的业务使用稳定性。数据负责人 当前没有实质性的操作权限。负责板块数据生产质量。项目角色 项目管理员 拥有管理项目及项目内的资源和成员的权限,同时拥有创建计算源和数据源等权限。但不具有创建业务板块的权限。开发者 ...

使用限制

使用限制 为保障软件系统稳定,Dataphin有部分使用上的限制或建议,详情如下表所示。功能项 操作项 使用限制/建议 管理中心 成员管理 超级管理员(即超管)是您购买Dataphin后,由系统初始化自动生成的角色。您的阿里云主账号即为超级管理...

确定需求

需求分析 在未考虑数据分析师、业务运营人员的数据需求的情况下,单纯根据业务调研建设的数据仓库,可能可用较差。完成业务调研后,您需要进一步收集数据使用者的需求,进而对需求进行深度思考和分析,并改进数据仓库。需求分析的途径有...

应用场景

但数据体系复杂、数据不统一,数据分析速度和数据准确一致难保障,战略决策与数据化运营受阻。解决方案:数据融合:通过数据引入功能,将业务系统数据集成、融合一体,统一基础数据。数据建模:通过规范建模功能,结合业务发展需求,自顶...

查看并管理治理工作台

使用场景:数据源连通中间断过,但目前已经稳定,无需进行修复;或者历史任务中出现过异常,但最新数据处理中已经用不到了,可以选择直接忽略。取消忽略:取消忽略后,将会按照最新一次校验结果确定问题状态。如果校验通过,问题状态是已...

查看并管理治理工作台

使用场景:数据源连通中间断过,但目前已经稳定,无需进行修复;或者历史任务中出现过异常,但最新数据处理中已经用不到了,可以选择直接忽略。取消忽略:取消忽略后,将会按照最新一次校验结果确定问题状态。如果校验通过,问题状态是已...

查看并管理整改流程

使用场景:数据源连通中间断过,但目前已经稳定,无需进行修复;或者历史任务中出现过异常,但最新数据处理中已经用不到了,可以选择直接忽略。取消忽略:取消忽略后,将会按照最新一次校验结果确定问题状态。如果校验通过,问题状态是已...

Dataphin智能数据建设与治理服务等级协议(半托管)

版本生效日期:2024年03月26日 本服务等级协议(Service Level Agreement,以下简称“SLA”)约定了阿里云向客户提供的智能数据建设与治理(简称“Dataphin”)的服务可用等级指标及赔偿方案。特别提示您,除非另有约定,本协议不适用于...

合规&认证

Dataphin智能数据建设与治理作为瓴羊开发云领域的核心产品,⾼度重视产品的合规并积极对标国内和国际最⾼标准合规要求。当前Dataphin产品的开发、测试、运维和运营服务均已通过 ISO 27001、ISO 27018 认证,意味着Dataphin 及瓴羊在...

基本概念

本文为您介绍资产质量中的数据对象、质量规则、强规则和...质量报告 数据表参与生产环境运维调度的结果,会触发周期质量规则的校验。质量报告为您展示某个数据表的质量规则的校验结果。分区表达式 定义资产质量规则作用的数据范围的表达式。

权限审计

Dataphin支持对数据表、数据源的权限进行查看、搜索、审计与下载,及时发现不合理的授权...Dataphin支持对数据表、数据源的权限变更操作进行查看、搜索、审计与下载,以此来判断授权、回收、交还等操作的合理。说明 仅支持超级管理员操作。

权限审计

Dataphin支持对数据表、数据源的权限进行查看、搜索、审计与下载,及时发现不合理的授权...Dataphin支持对数据表、数据源的权限变更操作进行查看、搜索、审计与下载,以此来判断授权、回收、交还等操作的合理。说明 仅支持超级管理员操作。

沙箱执行

任务调度引擎在启动任务时,会将任务运行在内置的安全沙箱内,保障任务和服务的安全。安全沙箱提供以下能力:限制网络请求:禁止用户任务请求敏感服务,如Dataphin内部服务等。限制文件读取:禁止用户任务读写敏感文件,如/etc/hosts等...

答疑支持

若您在使用智能数据建设与治理Dataphin的过程中有任何疑问,您可通过答疑支持联系我们,为您答疑解惑。操作步骤 在Dataphin页面,按照以下操作指引或单击蓝色小机器人选择 答疑支持,进入答疑支持页面后,输入您需解答的问题。依次单击 ...

日志审计

Dataphin产品提供了操作的审计日志输出,根据不同的部署模式提供...您可以将这些行为事件下载或保存到日志服务SLS或对象存储OSS上,然后进行行为分析、安全分析、资源变更行为追踪和行为合规审计等操作。支持的云上产品详见 支持的云服务。

答疑支持

若您在使用智能数据建设与治理Dataphin的过程中有任何疑问,您可通过答疑支持联系我们,为您答疑解惑。使用说明 需保证网络连通、Dataphin已升级至3.14.1及以上版本且已经对接工单系统(如需对接可联系运维部署团队)方可使用工单功能。...

基本概念

本文为您介绍资产质量中的数据对象、质量规则、强规则和...质量报告 数据表参与生产环境运维调度的结果,会触发周期质量规则的校验。质量报告为您展示某个数据表的质量规则的校验结果。分区表达式 定义资产质量规则作用的数据范围的表达式。

快速入门

如果您是首次使用智能数据建设与治理Dataphin,您可以参考快速入门文档,了解如何购买实例并接入服务端。Dataphin全托管 Dataphin全托管快速入门 Dataphin半托管 Dataphin半托管快速入门

漏洞管理

Dataphin实施了漏洞管理流程,结合使用商业化工具和内部专门构建的工具来扫描软件漏洞,并通过自动和手动渗透工作、质量保证流程、软件安全审查和外部审核来确保软件的安全。漏洞管理团队负责跟踪和跟进漏洞。确定了需要修复的漏洞之后,...

创建实体

实体指具有可区别且独立存在的某种事物,比如人、地名、公司、设备、商品等。本文将指导您如何创建实体。操作步骤 在Dataphin首页,单击顶部菜单栏的 规划。进入 Dataphin规划 页面后,默认进入 数据架构 页面。在 标签架构 页面,按照下...

实时模式State配置

通过合理的配置Flink的State数据过期时间可以提高资源利用率、内存管理、数据一致和容错。本文将为您介绍如何配置Flink实时任务的State过期时间。操作步骤 请参见 实时模式配置入口,进入实时任务的 实时模式 配置页面。在配置面板中...

登录安全设置

登录安全设置支持配置登录会话过期时间和关闭浏览器账号自动退出登录,提高自建账号体系的安全。本文为您介绍如何配置登录安全设置。前提条件 当您使用Dataphin自建账号体系时,可配置登录安全设置。权限说明 超级管理员和系统管理员支持...

实时模式State配置

通过合理的配置Flink的State数据过期时间可以提高资源利用率、内存管理、数据一致和容错。本文将为您介绍如何配置Flink实时任务的State过期时间。操作步骤 请参见 实时模式配置入口,进入实时任务的 实时模式 配置页面。在配置面板中...

导航设置

说明 为了展示的美观,建议选择透明底色图片上传。浏览器页签 需设置 favicon,即在浏览器标签页展示的Logo。Logo格式要求为PNG或JPG,且大小在200KB以内。如未上传该Logo,将展示系统默认图标。导航预览 设置完成后,即可实时预览设置的...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用