DataWorks的模型列表帮助您统一管理已创建的模型。在列表页，您可查看指定条件的模型，同时，也可对多个目标模型执行批量操作。本文为您介绍如何查看模型列表并批量修改模型信息。使用限制 当前仅支持批量修改模型的生命周期。操作步骤 ...
主要操作流程 操作目的 维度建模 使用DataWorks的 智能数据建模 完成对业务数据仓库的模型规范制定及数据分层、数据域、业务过程等信息的设定，完成逻辑模型的设计，并将逻辑模型发布生成物理表。DataWorks智能建模会将创建的模型表发布到...
本文为您介绍如何通过DDM管理布局。为了保持模型设计ER图的美观性，在模型设计时可以对模型进行布局，目前提供分层布局、正交布局两种布局算法。模型设计时，在 开始 页面，您可以单击 布局 对模型进行布局操作，默认为正交布局。
本实验使用默认分层结构，并且为了规范模型的命名，将同一分层中表名称的命名格式统一，系统为每个数仓分层配置对应的表名“检查器”，开启并设置默认检查器，在进行模型设计时，表名会按照检查器设置自动填充，设计师仅需补充自定义内容...
一、组件说明 方差膨胀系数（VIF）是用于检测多元回归模型中自变量之间多重共线性的指标。VIF是一个统计量，衡量自变量之间线性相关性的强度。如果一个自变量与其他自变量高度相关，则该自变量对响应变量的贡献将受到其他自变量的影响，这...
通常，Pearson相关系数用于判断机器学习模型中两个特征之间的线性关系，如果两个特征相关度较强，则表明这两个特征有重复的嫌疑，您可以根据具体的情况选择丢弃一个特征，以保证模型的有效性。语法 CREATE FEATURE feature_name WITH...
两阶段法（Two-Stage）除了需要前置评分卡模型的预测分值（AcceptRejectScore），还需要一个前置模型预测样本被接受或拒绝的概率（GoodBadScore），两阶段法通过拟合AcceptRejectScore和GoodBadScore的线性关系，修正前置评分卡模型对无...
模型结果查看与发布 在画布中选中线性回归组件，单击右侧输入配置栏中的 模型结果，可以查看该算法生成的所有模型。单击选中模型右侧的 发布，在弹出的对话框中输入模型名称，单击 发布。在 模型管理 页面，可以查看所有经工业分析建模训练...
选择属于线性规划、非线性规划或约束类问题。添加模型序列。即创建索引，在索引创建中，选择 索引类型 为 普通索引，并赋予 索引名称，该名称将用于模型构建中的引用。您可以通过 手动输入 或者 关联表 的方式获取 索引值。定义变量。变量...
需要注意的是：以上图为例，模型设计师在工作空间Project_1中进行模型设计（模型1），这套模型通过模型设计空间物化部署至Project_2、Project_3后，如果在应用过程中发现模型1需要完善，则仅能在Project_1中进行修改，Project_2、Project_3...
常规机器学习组件 GBDT二分类 线性支持向量机 逻辑回归二分类 GBDT回归 线性回归 K均值聚类 逻辑回归多分类 朴素贝叶斯 PS系列组件 PS-SMART二分类 PS-SMART多分类 PS-SMART回归 PS线性回归 可视化配置组件 您可以在 通用模型导出 ...
提供多种（AnalyticDB MySQL 2.0、AnalyticDB MySQL 3.0、AnalyticDB PostgreSQL）的数据源的对接能力，用户可以基于此连接自己的消费者数据集，并基于产品内置的规则构建消费者运营模型（AIPL/RMF模型），快速完成消费者的结构化分层，为...
线性回归是数理统计中的回归分析方法，可以确定两种或两种以上变量之间相互依赖的定量关系。Designer预置了线性回归算法模板，便于您通过农业贷款的历史发放情况，快速实现贷款发放预测。本文为您介绍Designer线性回归算法预置模板的具体...
特性 易用性 考虑到用户分层，有些用户希望通过简单的交互操作完成模型训练，有的用户希望定时调度模型训练和预测任务，有的用户希望复用PAI-EasyVision已有模块，在此基础上进行模型结构调整，再重新训练。因此，PAI-EasyVision支持通过...
本文为您介绍如何使用 Designer 预置的工作流模板，快速构建发电场输出电力预测模型。背景信息 本工作流基于综合循环发电场的发电数据，展示机器学习在工业生产中的应用。因为风力发电的输出电力通常决定了单位发电机能够生产的电能，所以...
设置表字段信息 完成上述操作后，模型所需字段即已被添加至该模型中，此时您可以根据业务需求设置模型各字段的 关联字段、冗余字段、关联粒度/指标。设置字段属性。字段属性默认展示 字段名称、类型、字段显示名、描述、主键、非空、度量...
数仓分层 准备事项 参考链接 公共层 已在公共层创建数仓分层。用于确定维度所属的层级。创建数仓分层 已创建数据域，用于确定维度所属的业务数据视角。数据域 应用层 已在应用层创建数仓分层。用于确定维度所属的层级。创建数仓分层 已创建...
创建数仓分层 您需要根据需求选择合适的分层。汇总数据层：用于承载公共层的派生指标。应用数据层：用于承载应用层的派生指标。按需创建：数据域 或 业务过程 数据集市 或 主题域 公共层的派生指标：需要创建数据域或业务过程。用于确定...
设置表字段信息 完成上述操作后，模型所需字段即已被添加至该模型中，此时您可以根据业务需求设置模型各字段的 关联字段、冗余字段、关联粒度/指标。设置字段属性。字段属性默认展示 字段名称、类型、字段显示名、描述、主键、非空、度量...
相比较通过原生DDP训练模型后的性能数据，使用AIACC-ACSpeed训练多个模型时，性能具有明显提升。本文为您展示了AIACC-ACSpeed的部分典型模型的训练性能数据。测试版本 ACSpeed版本：1.0.2 Cuda版本：11.1 torch版本：1.8.1+cu111 实例类型...
设置表字段信息 完成上述操作后，模型所需字段即已被添加至该模型中，此时您可以根据业务需求设置模型各字段的 关联字段、冗余字段、关联粒度/指标。设置字段属性。字段属性默认展示 字段名称、类型、字段显示名、描述、主键、非空、度量...
DataWorks智能数据建模首页，为您展示了当前租户内创建的模型及派生指标数量，以及近三十天内当前工作空间成功发布至生产环境的模型列表，帮助您了解模型动态概况。本文为您介绍DataWorks智能数据建模首页信息概览。进入首页 进入数据开发...
功能说明 高斯过程回归是使用高斯过程先验对数据进行回归分析的非参数模型。计算逻辑原理 高斯过程回归中支持三种核函数：高斯核：，其中尺度因子，尺度 是高斯核函数的参数。线性核：，其中偏移 和尺度因子，是线性核函数的参数。二次有理...
使用限制 DataWorks工作空间中，不同角色使用智能数据建模的限制如下：浏览模型详情：访客、空间管理员、模型设计师、项目所有者 等所有DataWorks工作空间中的角色均可浏览数据模型的相关信息。更多DataWorks工作空间角色，详情请参见 空间...
模型训练相关 1.当前百炼里面导入企业文档，进行问答，有进行FT或者某种方式的模型训练吗？有。导入文档只是通过对文档内容解析-分块-embedding向量化得到文档的向量数据库，然后在问答过程中先根据用户query进行向量检索，然后将检索结果...
使用EasyRec构建推荐模型 以读取MaxCompute表数据为例，介绍如何使用EasyRec进行模型训练、配置任务例行化及部署模型。SimRank+相似度计算算法 介绍协同过滤算法SimRank的原理和其应用在个性化推荐场景时的改进，以及如何在生产环境部署...
数据域规范 数仓分层 数据仓库以分层建设为主包含如下几类分层，其中CDM包含DWD、DWS、DIM。在Hologres中通过Schema隔离不同的分层。ODS（Operational Data Store）：操作数据层 CDM（Common Data Model）：公共维度模型层 DWD（Data ...
本文介绍了线性回归算法（Linear Regression，以下简称LR）相关内容。简介 LR是利用线性回归方程的最小平方函数对一个或多个自变量和因变量之间关系进行建模的一种回归分析。使用场景 LR是一个回归模型，主要用于拟合数值。该模型简单，可...
优化求解器的线性规划学习案例。数学规划求解-线性规划 我们有提供6个案例讲解线性规划（LP）的概念和应用场景，讲解遇到不同问题时，如何分析问题，建模，然后调用优化求解器求解，再利用求解器的结果去解决问题。并提供了10+源代码供参考...
Designer和EAS在使用链路上进行了无缝对接，您可以在离线训练、预测和评估流程完成后，将单个模型部署至EAS，以创建一个在线模型服务。本文为您介绍如何将在Designer平台训练获得的模型部署为EAS在线服务。前提条件 已完成模型训练，并验证...
在大部分模型推理场景中，业务进程通过OSS或NAS将模型文件挂载到本地目录，进行模型读取、模型切换以及容器的扩缩容等操作时，会受网络带宽的影响，存在较大的延时问题。为了解决这个问题，EAS 提供了本地目录内存缓存加速的功能。通过将...
本文以Llama-3-8B-Instruct模型为例，为您介绍如何在DSW中对Llama3大模型进行参数微调训练，以使模型更好地理解和适应特定的任务，提高模型在指定任务上的表现和性能。背景信息 Llama3是Meta于2024年4月开放的Llama系列的最新模型。基于...
本文介绍空间构建平台内上传自制的精模建筑模型时的质量标准及模型优化建议。精模建筑模型质量标准 质量标准 说明 几何规范 模型比例与真实世界近似，DataV中三维场景使用的单位是米，不同的建模软件单位不一样，比如blender的建模单位是米...
本文介绍空间构建平台内上传自制的精模建筑模型时的质量标准及模型优化建议。精模建筑模型质量标准 质量标准 说明 几何规范 模型比例与真实世界近似，DataV中三维场景使用的单位是米，不同的建模软件单位不一样，比如blender的建模单位是米...
设置表字段信息 完成上述操作后，模型所需字段即已被添加至该模型中，此时您可以根据业务需求设置模型各字段的 关联字段、冗余字段、关联粒度/指标。设置字段属性。字段属性默认展示 字段名称、类型、字段显示名、描述、主键、非空、度量...
用户阶段标签是按照您需要的用户分层逻辑对用户进行筛选，类似于人群筛选，筛选出满足不同条件的用户，给他们打上不同的分层标签。例如：筛选出购买总金额≥1000且爱好美食的用户，打上“营销优先级”为“优先级1”的标签；筛选出购买总...
多层感知机是一种前馈神经网络，通过多个神经元的组合对输入特征进行非线性变换和特征提取，最终输出一个连续的预测结果。在训练过程中，利用反向传播算法（Backpropagation）和梯度下降算法（Gradient Descent）来优化模型参数，以最小化...
模型在线服务EAS（Elastic Algorithm Service）是PAI产品为实现一站式模型开发部署应用，针对在线推理场景提供的模型在线服务，支持将模型服务部署在公共资源组或专属资源组，实现基于异构硬件（CPU和GPU）的模型加载和数据请求的实时响应...
多层感知机是一种前馈神经网络，通过多个神经元的组合对输入特征进行非线性变换和特征提取，最终输出一个连续的预测结果。在训练过程中，利用反向传播算法（Backpropagation）和梯度下降算法（Gradient Descent）来优化模型参数，以最小化...
基于MySQL+Tablestore分层存储架构的大规模订单系统实践-架构篇 基于MySQL+Tablestore分层存储架构的大规模订单系统实践-数据同步DTS篇 基于MySQL+Tablestore分层存储架构的大规模订单系统实践-数据同步Canal篇 基于MySQL+Tablestore分层...