权限列表 支持对系统设置、数据同步、数据标准、数据建模、智能标签、统一服务、通用资源、质量评估、任务运维、画像分析、运营工作台、数据资产中心的功能权限展示。支持对全员成员角色和工作组成员角对应的数据权限展示。我的申请 支持...
本文介绍 云原生多模数据库 Lindorm 时序引擎的使用流程，帮助您快速连接使用Lindorm时序引擎。操作流程 从创建Lindorm实例到Lindorm...行协议写入 应用开发，包括数据建模、写入、数据查询、预降采样、机器学习等。具体操作请参见 开发指南。
DataWorks数据建模支持在建模前规划制定数据标准，或在建模使用过程中根据业务情况沉淀企业业务的数据标准。通过规范约束标准代码、度量单位、字段标准、命名词典，来保障后续建模与应用过程中数据处理的一致性，从源头上保障数据的标准化...
登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 数据开发与运维 数据建模，在下拉框中选择对应工作空间后单击 进入数据建模。在 智能数据建模 页面单击顶部导航栏的 数据指标。在 数据指标 页面的左侧导航栏，单击 原子指标，...
Y Y N Y Y 移除已申请离线标签 Y N N N-离线数据集 新建（保存并发布）&复制离线数据集 Y Y N N-编辑（保存&发布）离线数据集 Y Y N N Y 删除离线数据集 Y N N N Y 查看离线数据集详情 Y Y Y Y Y 查看实例详情&运行日志 Y Y N N Y 下线离线...
具有开箱即用的能力和接近中心化数据建模的流程体验。支持模型开发快速上手，帮助用户高效完成模型研发。高性能 针对多个参与方可能出现的高延迟、低带宽问题，产品在通信机制上进行了优化，如采用模型/梯度稀疏化的方案，实现了对大规模、...
在您完成离线数据集的创建或行为关系的定义后，您可为所创建的离线数据集或行为关系创建对应的离线标签，以便后续的资产应用创建。如标签服务、画像服务的创建。功能概述 您可根据业务需求创建所需的离线标签，离线标签的加工方式不同创建...
适用于各引擎 数据建模 云原生一体化数仓 本教程结合DataWorks、MaxCompute、Hologres等多款产品，详细介绍离线实时、分析服务、数据建模、数据治理、湖仓一体的数仓能力解读。DataWorks、MaxCompute、Hologres 数据集成 数据分析 数据建模...
在您完成离线数据集的创建或行为关系的定义后，您可为所创建的离线数据集或行为关系创建对应的离线标签，以便后续的资产应用创建。如标签服务、画像服务的创建。功能概述 您可根据业务需求创建所需的离线标签，离线标签的加工方式不同创建...
操作流程 参考文档 按照流程，您可以根据以下步骤来完成数据建模：创建数据集 构建模型 数据处理 高级配置 管理数据集。对应步骤的操作文档如下表所示。步骤 参考文档 内容说明 一、创建数据集 创建数据集 如何创建新数据集 二、构建模型 ...
在您完成离线数据集的创建或行为关系的定义后，您可为所创建的离线数据集或行为关系创建对应的离线标签，以便后续的资产应用创建。如标签服务、画像服务的创建。功能概述 您可根据业务需求创建所需的离线标签，离线标签的加工方式不同创建...
适用于各引擎 数据建模 云原生一体化数仓 本教程结合DataWorks、MaxCompute、Hologres等多款产品，详细介绍离线实时、分析服务、数据建模、数据治理、湖仓一体的数仓能力解读。DataWorks、MaxCompute、Hologres 数据集成 数据分析 数据建模...
本文为您介绍Hive的离线数据迁移到 云数据库 SelectDB 版 的各个方式以及方式选择规则。方式选择 根据不同的业务场景，选择合适您的迁移方式。具体的方式选择可以参考如下规则：方式 适用场景 推荐原因 操作步骤 Catalog 数据存储在阿里云...
通过关联数据标准中的标准字段，实现字段值的统一和规范化，帮助您管控治理后数据的一致性和数据质量。...后续操作 完成关联后，数据建模中逻辑表详情的 质量规则 页签，会自动生成字段规则，更多信息，请参见 设置逻辑表质量规则。
DataWorks数据建模的设计与实现解耦，在设计过程中，您无需考虑各个大数据引擎的实现方式，建模引擎会根据FML语言定义的Schema去驱动底层各个数据引擎的执行和操作，仅在实际物化（即把设计的逻辑表转换为底层引擎的物理表）阶段，建模引擎...
在页面左上角，单击 图标，选择 协同，单击 数据建模 数据模型设计 我的模型，在逻辑表 操作 列，单击 详情 后，单击 质量规则 页签，查看实例化对应质量规则。在页面左上角，单击 图标，选择 协同，在顶部菜单栏，单击 质量评估，在左侧...
根据数据元绑定的质量校验UDF，数据建模会据此自动添加对应云计算资源平台下的UDF规则，如自动添加MaxCompute的自定义SQL规则，默认期望值为0，则执行的规则SQL如下：select sum(id_card_check(idCard,"{\"type\":\"STRING\",\"size\":18}...
通过数据标准的管理功能，模型设计者可通过设计标准数据元素，定义关键业务对象、业务对象属性及值域，规范标准数据字典，...通用设置 数据建模基础信息：对逻辑表的属性进行配置、管理。字段标准通用信息：对字段标准的属性进行配置、管理。
零售电商GMV分析 DataWorks MaxCompute 数据集成 数据开发 基于DataWorks提供的 智能数据建模 产品，使用该产品内置零售电子商务数仓模型，为您介绍DataWorks在数仓搭建过程中的技术栈及流程实现。案例相关文档：零售电商数据建模。视频...
基于大模型的NL2SQL零代码空间数据建模 共享单车地理数据分析项目 文旅项目规划 领取步骤 登录 权益中心，完成学生认证后领取活动代金券。选取大数据智能产品：DataV-Board：个人版包年兑换。DataV-Atlas：基础版产品兑换。
数据标准为用户提供模型和字段标准设计和管理的能力。通过模型层级、数据域等属性，对逻辑表的命名进行标准化设计；...通用设置 数据建模基础信息：对逻辑表的属性进行配置、管理。字段标准通用信息：对字段标准的属性进行配置、管理。
数据建模链路：先由数据团队主管定义好建模过程中可能使用到的数据标准，再由数据建模人员设计并提交模型，最后经由数据团队主管、运维或部署人员审核无误后发布至生产环境。数据开发与生产链路：开发人员在开发环境先开发代码、配置调度...
通过阿里云MaxCompute、云数据库RDS MySQL、DataWorks等产品，可以实现互联网、电商网站的离线数据分析，且支持通过DataV大屏展示分析后的业务指标数据。概述 电商网站的销售数据通过大数据进行分析后，可以在大屏幕展示销售指标、客户指标...
自定义属性需要在 数据标准 通用设置 数据建模基础信息 中设置，更多信息 新建数据建模基础信息，请参见，如图中”自定义“即自定义属性，如果不设置自定义属性，则此处不显示。在 字段信息 页签，可通过以下方式的任意一种，录入字段信息...
在进行联邦建模前，应先确认联邦建模中可用的建模数据。联邦建模中的建模数据分为两种：原始样本和联邦表。原始样本：指的是联邦建模各参与方的原始数据，即各节点中授权到该建模项目中的数据，该数据作为建模样本供联邦建模使用。联邦表：...
模型类目：指创建资产时，对应工作组下的数据建模目录。单击 所属工作组 下拉列表选择对应工作组后，单击 所属类录 下拉列表选择模型对应目录，单击 查询，展示符合该条件的资产。说明 未选择 所属工作组，模型类目 不可选择。所属类目：指...
DataWorks增值模块 DataWorks智能数据建模 包年包月资源组 Serverless资源组包年包月、独享调度资源组、独享数据集成资源组、独享数据服务资源组 停止使用资源组 按量付费资源组 Serverless资源组按量付费、公共调度资源组、公共数据服务...
我可管理的资产指的是有管理权限资产，包括在数据建模模块创建逻辑表并物理化成功的表资产，在统一服务模块创建API并上线的API资产，以及申请的其他资产。本文介绍如何查看我可管理的资产。前提条件 已具备租户管理员或工作组管理员角色。...
手动打标包括页面手动指定、excel上传、数据标准打标、数据建模打标等。敏感数据保护 在识别出敏感数据之后，Dataphin支持对敏感数据进行脱敏保护。主要包括以下场景：敏感数据查询脱敏 当使用即席分析、代码任务、数据预览等功能，查看被...
手动打标包括页面手动指定、excel上传、数据标准打标、数据建模打标等。敏感数据保护 在识别出敏感数据之后，Dataphin支持对敏感数据进行脱敏保护。主要包括以下场景：敏感数据查询脱敏 当使用即席分析、代码任务、数据预览等功能，查看被...
单击左上方的 图标，选择 全部产品 数据建模 维度建模。在 维度建模 页面单击 图标，进入 模型列表。查看模型列表及批量修改模型。在模型列表，您可执行如下操作：查看模型列表 查看模型的基本信息或执行新建、克隆等单个模型的相关操作。...
本文介绍通过DataWorks将MongoDB的离线数据迁移至Lindorm宽表。背景信息 有关大数据开发治理平台DataWorks，具体请参见 什么是DataWorks。注意事项 将MongoDB的离线数据迁移至Lindorm宽表时，需要将MongoDB嵌套的JSON数据展开成水平结构，...
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
本文介绍Cassandra数据建模的概念、建模建议。Cassandra是一款分布式、去中心化、高可用的列存储（Wide Column Store）的No SQL数据库。分布式层面主要依靠一致性Hash算法把数据分布在整个集群中，单机主要实现了基于LSM-Tree的引擎。集群...
当飞线请求失败时 飞线数据接口请求失败时（请求失败的情况可能是：网络问题或接口报错等）返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据 页签的 数据响应结果...
100 splitInterval:6h mem:Xms6G-Xmx6G 1.5 MB 230000 12分钟30秒 CPU占比为30%2 总时间线数据为600万 总数据点数为2592000000 1 channel:10 oidCache:true oidBatch:100 splitInterval:6h mem:Xms8G-Xmx8G 292 MB 200000 2小时55分钟30秒 ...
建议您思考下列问题，对后续的数据建模将有巨大的帮助：业务数据是根据什么（维度、粒度）汇总的，衡量标准是什么？例如，成交量是维度，订单数是成交量的度量。明细数据层和汇总数据层应该如何设计？公共维度层该如何设计？是否有公共的...
建议您思考下列问题，对后续的数据建模将有巨大的帮助：业务数据是根据什么（维度、粒度）汇总的，衡量标准是什么？例如，成交量是维度，订单数是成交量的度量。明细数据层和汇总数据层应该如何设计？公共维度层该如何设计？是否有公共的...
当飞线请求失败时 飞线数据接口请求失败时（请求失败的情况可能是：网络问题或接口报错等）返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据 页签的 数据响应结果...