背景信息 Dataphin支持对接的数据源包括大数据存储型数据源、文件数据源、消息队列数据源、关系型数据源和NoSQL数据源，各模块支持对接的数据源类型说明如下：如果您需要在Dataphin中连接某数据源，则需要先在数据源管理中创建该数据源。...
实时数仓 该场景需要在一个平台上提供统一的在线查询和离线计算的能力，简化数据架构，降低开发和运维成本。通过弹性伸缩支持更合理的资源配比，减少非高峰期的保有资源，优化成本，提高性价比。该场景可实现：在离线一体化 支持数据实时增...
SL 651协议 SL 651是国家水文局制定的用于水文监测数据通信的协议，它规定了水文监测数据采集与传输的格式、内容、传输方式等技术参数，支持通过TCP（安全性低，不推荐）和TLS两种方式将遥测站设备接入物联网平台。认证方式 一方认证：需要...
使用数据资源平台时，需先购买并登录数据资源平台。本文为介绍如何购买及登录数据资源平台。前提条件 已创建阿里云账号，具体操作，请参见 创建阿里云账号。背景信息 数据资源平台账号登录体系与阿里云保持一致。购买数据资源平台 在数据...
已创建“全域数据平台”应用，具体操作，请参见 新建API归属应用。已创建“银行客户根据证件号码查询”API，具体操作，请参见 新建API-向导模式。背景信息 根据应用关联对应资源信息，包括服务、物理表、逻辑表、场景、场景节点、单节点、...
创建Hadoop计算源 新建Flink计算源 离线研发 新增支持离线调度模板功能，计算任务调度、集成任务调度、逻辑表调度、派生指标和离线数据集对象根据引用的调度模板进行任务调度。数据库SQL新增支持DM（达梦）和openGauss数据源。表管理新增...
购买数据库审计C100问题 是否支持审计线下IDC机房自己部署的数据库或其他云平台部署的数据库？支持。数据库审计本身的审计能力是支持的，只需打通线下线上的网络连接即可。您可以通过阿里云高速通道打通线下线上的网络连接，参见 连接本地...
阿里云数据资源平台是构建数据智能的全流程平台，提供数据汇聚、规范设计、指标与标签体系构建、数据质量管控、数据资产管理、数据资产服务与共享、智能分析等核心功能，支持行业知识内容沉淀，帮助金融、政府及企业客户快速构建智能数据中...
在离线计算任务中新建补数据计划 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 图标，选择目标工作组，单击 运维监控。在左侧导航栏，单击 图标，选择 离线任务 离线计算任务。在离线计算任务列表中...
2、创建监控规则 表 ads_user_info_1d 用于用户画像分析，为检测每日UV波动，我们对汇总数据进行表行数波动监测及主键进行唯一值校验，以此观察每日UV的波动，及时了解线上流量波动。规则生效时，当监控到 ads_user_info_1d 表对应主键不...
计算引擎 说明 相关文档 离线计算引擎 MaxCompute 阿里原生的大数据计算平台，承载海量数据存储与计算能力，高效率与高稳定性。设置Dataphin实例的计算引擎为MaxCompute AnalyticDB for PostgreSQL 专注于OLAP领域的分析型数据库，是云端...
2、创建监控规则 表 ads_user_info_1d_odps 用于用户画像分析，为检测每日UV波动，我们对汇总数据进行表行数波动监测及主键进行唯一值校验，以此观察每日UV的波动，及时了解线上流量波动。规则生效时，当监控到 ads_user_info_1d_odps 表...
使用场景 交管云控平台使用数据资源平台统一服务作为数据服务发布、管理的平台，交通行业线的API开发者在为API服务编写查询SQL时，会选择使用比较基础的语法，例如只包含SELECT和WHERE条件做一些简单的查询逻辑。等到API开发完成上线后，...
本文将为您介绍数据资源平台的到期提醒与停机策略。到期提醒 数据资源平台实例到期前的168小时（7天）、72小时、24小时，系统将会给您发短信，提醒您所购买的实例即将到期。请您及时备份数据或续费，避免影响正常使用。停机策略 数据资源...
本服务等级协议（Service Level Agreement，以下简称“SLA”）约定了阿里云向客户提供的数据资源平台的服务可用性等级指标及赔偿方案。特别提示您，除非另有约定，本协议不适用于数据资源平台公测、邀测、免费的功能及版本，也不适用于数据...
2、创建监控规则 表 ads_user_info_1d 用于用户画像分析，为检测每日UV波动，我们对汇总数据进行表行数波动监测及主键进行唯一值校验，以此观察每日UV的波动，及时了解线上流量波动。规则生效时，当监控到 ads_user_info_1d 表对应主键不...
2、创建监控规则 表 ads_user_info_1d_odps 用于用户画像分析，为检测每日UV波动，我们对汇总数据进行表行数波动监测及主键进行唯一值校验，以此观察每日UV的波动，及时了解线上流量波动。规则生效时，当监控到 ads_user_info_1d_odps 表...
客户简介 捷顺科技是一家智慧停车、智慧社区综合服务提供商，集研、产、销于一体，公司的产品线涵盖各类软硬件产品，包括捷停车及捷生活APP、停车场智能硬件、智能门禁、通道闸、城市级智能一卡通系统、停车场智能管理平台、智慧商业O2O...
同时，平台也存在各种类型的时空查询需求，包括但不限于实时的圈选、出入监测和历史轨迹分析，并且由于查询类型的多样性，平台对实时查询性能的要求也更加严格。如何保存和处理这些实时数据，如何提升实时查询性能，成为平台需要面临的新...
离线计算实例是由智能标签、表加工、质量评估、数据加工等业务产生的任务实例，运维监控支持查看离线计算任务实例的详情，包括实例信息、任务代码、实例日志。本文介绍查看离线计算实例详情。操作步骤 登录 数据资源平台控制台。在页面左上...
客户需求 海量数据处理效率下降，离线数据计算时长不稳定。实时计算开发维护成本高，希望对数仓进行综合治理。价值体现 基于飞天大数据平台产品，快狗打车不仅机器成本节约30%以上，数据开发效率提升100%。从Java Storm迁移到Flink SQL使...
离线计算任务是由智能标签、表加工、质量评估、数据加工等业务产生的任务，运维监控支持查看离线计算任务详情，包括任务信息、任务代码、实例列表。本文介绍如何查看离线计算任务详情。操作步骤 登录 数据资源平台控制台。在页面左上角，...
本文为您介绍数据资源平台实例售卖支持的地域、版本及购买时长。背景信息 购买数据资源平台前，请您了解以下几点：购买前建议您先联系阿里云 售前咨询 并提供企业数据建设需求及背景信息。待阿里云售前咨询帮您确认数据资源平台当前版本及...
快速入门简要介绍了如何快速上手数据资源平台，包括不限于数据的接入、治理、建模等。本文介绍数据资源平台入门概述。快速使用说明 准备工作：在使用数据资源平台前，需要完成的准备工作，具体操作，请参见 创建阿里云账号 和 购买及登录...
本产品（大数据开发治理平台 DataWorks/2024-05-18）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能...
资产质量基于Dataphin平台，为数据的开发及使用提供全套的数据质量解决方案。数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。5分钟快速了解 前提条件 已购买资产质量增值服务，详情请参见 开通Dataphin。背景...
资产质量基于Dataphin平台，为数据的开发及使用提供全套的数据质量解决方案。数据质量的功能包括质量规则配置、质量监控、调度配置、智能报警、校验治理等。5分钟快速了解 前提条件 已购买资产质量增值服务并且当前租户已开通资产质量模块...
计算引擎 说明 相关文档 离线计算引擎 MaxCompute 阿里原生的大数据计算平台，承载海量数据存储与计算能力，高效率与高稳定性。设置Dataphin实例的计算引擎为MaxCompute AnalyticDB for PostgreSQL 专注于OLAP领域的分析型数据库，是云端...
已购买数据资源平台，具体操作，请参见 购买及登录数据资源平台。操作步骤 登录 数据资源平台控制台。在页面右上角，单击 图标，选择 系统设置 用户管理。在用户管理页面，单击 添加成员。在 添加成员 页面，单击人员下拉框选择对应账号，...
数据资源平台提供了完善的权限管控机制，支持以租户或工作组为管控粒度，通过对用户授予不同的角色实现全局或工作组内的各组件功能权限管控。本文为您详细介绍租户、工作组粒度下的角色体系。背景信息 数据资源平台功能权限是基于角色的...
数据资源平台按版本、每日任务实例数和购买时长来计算费用，产品最短有效期为一个月，您可以自主选择购买版本和时长。产品临近到期日时，系统会自动发出通知，提醒您及时续费。本文为您介绍数据资源平台的计费情况。使用数据资源平台产品，...
案例八：构建数据开发平台 用户需要构建一个数据开发平台，期望减少开发过程中对线上业务的影响同时增加开发效率。建议：使用 AnalyticDB PostgreSQL版 Serverless版本，计算节点规格为4C16G以上，计算节点数量为2个以上，可部署多个实例。...
使用场景 交管云控平台使用 数据资源平台 统一服务作为数据服务发布、管理的平台，交通行业线的API开发者在为API服务编写查询SQL时，会选择使用比较基础的语法，例如只包含select和where条件做一些简单的查询逻辑。等到API开发完成上线后，...
在OpenAPI场景，当外部应用需要对接 数据资源平台 组件的OpenAPI时，需要联系租户管理员，对外部应用调用 数据资源平台 组件的OpenAPI进行授权。本文介绍如何授权API。前提条件 已完成应用创建，具体操作，请参见 新建应用。如需进行API...
数据资源平台提供了一站式数据资产定义、生产、管理与服务平台，提供企业级数据资产构建能力和一致性使用体验，助力客户快速构建数据智能平台，实现数据资源统一管理，挖掘潜在规律，优化业务决策，让大数据真正的驱动客户业务。...
支持查看 数据资源平台 各组件的功能权限和数据权限。本文介绍如何查看各组件的权限内容。前提条件 使用权限账号登录 数据资源平台。查看权限列表 登录 数据资源平台控制台。在页面右上角，单击 图标，选择 系统设置。在页面左侧导航栏，...
操作步骤 登录 数据资源平台控制台。在页面左上角单击 图标，选择 探索。在顶部菜单栏，单击 图标，选择目标工作组，单击 模型中心。在模型列表的目标离线模型 操作 列，选择 更多 上架。在 上架申请 面板，输入 申请理由，单击 提交。模型...
阿里云数据资源平台是数据资产定义、加工、管理、服务的全流程平台，提供数据同步、数据查询、数据标准、数据建模、数据加工、质量评估、业务模型构建、资产管理、数据服务等功能，为智能数据应用持续稳定供给全量、标准、干净、智能的数据...
本文介绍Cloudera企业数据云平台服务关联角色AliyunServiceRoleForCDP以及如何删除该角色。背景信息 Cloudera企业数据云平台服务关联角色AliyunServiceRoleForCDP是Cloudera企业数据云平台在某些情况下，为了完成自身的某个功能，需要获取...
创建日志表（ods_raw_log_d_spark）并解析数据 数据通过离线集成任务同步至私有OSS数据源后，基于生成的OSS文件，通过EMR SPARK SQL创建的外部表 ods_raw_log_d_spark，用 LOCATION 来访问离线数据集成任务写入 私有OSS对象存储 Bucket 的...