机器学习PAI

_相关内容

EAS架构及使用方法_人工智能平台PAI(PAI) | EAS模型服务概述

PAI提供了可视化建模(Designer)服务,支持大规模分布式的传统机器学习、深度学习、强化学习训练,支持流批一体训练,该子模块封装了上百种机器学习算法,详情请参见Designer...

FeatureStore是什么\n_人工智能平台PAI(PAI) | FeatureStore概述

FeatureStore作为PAI产品中心化的数据管理和共享平台,用于组织、存储和管理机器学习和AI训练中使用的特征数据。FeatureStore可以方便地向多人、多团队共享特征,保证离线...

PAI文本生成方法_人工智能平台PAI(PAI) | 智能文创解决方案

阿里云PAI提供智能文创解决方案,帮助您快速搭建囊括模型离线训练、离线预测和在线部署的端到端全链路构建流程。旨在从冗长、重复的文本序列中抽取、精炼或总结出要点...

如何在PAI-DSW中使用EasyTransfer进行文本分类_人工智能平台PAI... | 使用EasyTransfer进行文本分类

面向自然语言处理(NLP)场景的迁移学习在工业上拥有大量需求,且不断涌现新的领域,而传统的机器学习需要对每个领域都积累大量训练数据,这将耗费大量的人力和物力。...

自动特征工程(AutoFE)_人工智能平台PAI(PAI) | 在FeatureStore中使用自动特征工程(AutoFE)

通过AutoFE生成的pipeline模型,对训练集和测试集执行特征转换操作,从而提升机器学习或深度学习模型的效果。什么是AutoFE AutoFE(Auto Feature Engineering)指自动特征工程...

AI加速:如何对数据集进行加速_人工智能平台PAI(PAI) | 数据集加速器概述

机器学习训练场景下,通过对客户训练的数据集进行预分析和处理,为各种云原生的训练引擎提供统一的数据集访问加速方案,最终提升整体训练效率。架构图数据集加速器...

Tensorboard使用说明_人工智能平台PAI(PAI) | Tensorboard:训练可视化

DSW提供的Tensorboard插件是TensorFlow社区开发的深度学习可视化工具,可以从TensorFlow运行时生成的日志文件中展示丰富的可视化信息,帮助您更好地理解机器学习模型...

多模态RLHF标注模板_人工智能平台PAI(PAI) | 多模态RLHF标注

提问机器人的UDF使用pai-qw-基于上下文生成问题,其余参数与回答机器人相同,input_data及MarkResult用于让UDF正确接收输入参数,不可随意更改;return_nums为返回个数,可...

Meta Llama 3.1模型在PAI-Megatron-Patch的最佳实践

阿里云PAI灵骏智算服务是面向大规模深度学习场景的智算产品,提供一站式的异构计算资源和AI工程化平台。本方案将为您介绍如何使用阿里云PAI灵骏智算服务,以及基于...

FeatureStore使用案例_人工智能平台PAI(PAI) | FeatureStore使用案例汇总

本文是FeatureStore产品使用案例入口链接汇总。...通过AutoFE生成的pipeline模型,对训练集和测试集执行特征转换操作,从而提升机器学习或深度学习模型的效果。

如何使用工业质检解决方案_人工智能平台PAI(PAI) | 工业质检解决方案

在生产制造过程中,为了提升缺陷检测效率,PAI提供了工业质检解决方案。该解决方案借助人工智能算法,帮助您快速构建端到端的质检服务。本文为您介绍该解决方案的使用...

easyckpt的技术原理和使用方法_人工智能平台PAI(PAI) | EasyCkpt:AI大模型高性能状态保存恢复

EasyCkpt是PAI为PyTorch大模型训练场景而开发的高性能Checkpoint框架,通过实现接近0开销的模型保存机制,提供了大模型训练全过程进度无损的模型保存与恢复的能力。...

使用EAS部署社区模型_人工智能平台PAI(PAI) | EAS一键部署HuggingFace&ModelScope服务应用

背景信息当前,开放的模型社区(例如huggingface、modelscope)提供了大量的机器学习模型和代码实现,其对应库的接口将模型、框架以及相关的处理逻辑进行了封装,您仅需...

什么是图像检测训练算法组件_人工智能平台PAI(PAI) | 图像检测训练(easycv)

数据源格式是支持以下取值:COCO格式PAI标注格式(模型类型YOLOv 5、YOLOv 7仅支持PAI标注格式的数据集)PAI标注格式参数设置YOLOX模型结构是仅当训练模型类型为YOLOX...

如何使用协同过滤算法实现商品推荐_人工智能平台PAI(PAI) | 使用协同过滤实现商品推荐

登录PAI控制台。在左侧导航栏单击工作空间列表,在工作空间列表页面中单击待操作的工作空间名称,进入对应的工作空间。在工作空间页面的左侧导航栏选择模型开发与训练...

如何使用模型仓库FastNN_人工智能平台PAI(PAI) | 模型仓库(FastNN)

PAI模型仓库FastNN(Fast Neural Networks)是一个基于PAISoar的分布式神经网络仓库。目前FastNN已经支持了Inception、Resnet、VGG等经典算法,后续会逐步开放更多的先进模型。...

Llama 2-7 B全参数微调_人工智能平台PAI(PAI) | Llama 2-7 B基于DSW的全参数微调训练

gradio是一个快速构建机器学习Web展示页面的开源库。步骤三:下载训练数据在DSW的Notebook中执行以下命令下载模型训练所需的数据。在本方案中,PAI提供的是一份创意...

使用designer金融组件构建评分卡模型进行贷款风险评估_...PAI(PAI) | 评分卡信用评分

背景信息评分卡是信用风险评估和互联网金融领域常用的建模方法,并不简单对应于某种机器学习算法,而是一种通用建模框架。其原理是先将分箱后的原始数据进行特征工程...

XGBoost/LightGBM_人工智能平台PAI(PAI) | XGBoost/LightGBM

背景信息GBDT(Gradient Boosted Decision Trees)是一类机器学习算法,XGBoost和LightGBM是算法对应的高效工程实现。在Designer上,使用GBDT或XGBoost组件训练的算法模型导出...

如何使用AICompiler对TensorFlow和PyTorch模型进行...平台PAI(PAI) | AI编译器优化

AICompiler是集成在PAI-Blade中的AI编译优化组件,包含Static Shape和Dynamic Shape编译框架。通常您无需提供额外配置,AICompiler即可在通用透明的情况下帮助您提高推理...

Manifest参数说明_人工智能平台PAI(PAI) | PAIFlow Manifest参数说明

inputs:输入定义artifacts:parameters:outputs:输出定义artifacts:parameters:Artifact Artifact是数据流,代表机器学习在某一阶段的成果,用来串联上下流的工作流。artifacts:name:...

机器阅读理解解决方案_人工智能平台PAI(PAI) | 机器阅读理解解决方案

已开通PAI(Designer、DSW、EAS)后付费,并创建默认工作空间,详情请参见开通并创建默认工作空间。已创建OSS存储空间(Bucket),用于存储数据集、训练获得的模型文件和...

通义千问使用PAI灵骏的完整开发流程_人工智能平台PAI(PAI) | 通义千问Qwen全托管灵骏最佳实践

前提条件本方案以Qwen-7 B v 1.1.4版本的模型为例,在开始执行操作前,请确认您已经完成以下准备工作:已开通PAI(DSW、DLC、EAS)并创建了默认的工作空间。具体操作,请...

如何在PAI-DLC上使用Megatron-LM进行大语言模型预训练_人工智能... | LLM on DLC-Megatron on DLC最佳实践

背景信息基本概念语言模型(LM)是一种利用自然文本来预测词(Token)顺序的机器学习方法。大语言模型(LLM)是指参数数量达到亿级别的神经网络语言模型,例如:GPT-3、GPT-4...

离线模型组件的复制、读取和导出_人工智能平台PAI(PAI) | 离线模型(OfflineModel)相关组件

离线模型(OfflineModel)是存储在MaxCompute中的一种数据结构,基于PAICommand框架的传统机器学习算法生成的模型会以离线模型格式存储在对应的MaxComute项目中,您可以...

Mixtral-8 x 7 B使用PAI灵骏的完整开发流程_人工智能平台PAI(PAI) | Mixtral-8 x 7 B稀疏大模型最佳实践

前提条件本方案以Mixtral-8 x 7 B版本的模型为例,在开始执行操作前,请确认您已经完成以下准备工作:已开通PAI(DSW、DLC、EAS)并创建了默认的工作空间。具体操作,请...

什么是DSW_人工智能平台PAI(PAI) | 什么是DSW

应用场景机器学习和数据科学DSW支持JupyterLab交互式编程环境,预置了PyTorch、Tensorflow等丰富的镜像,算法人员和数据科学家可以轻松地进行数据工程、模型开发和训练、...

使用EASCMD或DSW部署服务_人工智能平台PAI(PAI) | 服务部署:EASCMD或DSW

DSW部署DSW是PAI针对深度学习推出的交互式云端开发环境,提供高性能GPU卡和开放的交互式编程环境。因为DSW已预置EASCMD客户端工具,所以DSW训练完成的模型可以直接...

部署Stable Diffusion WebUI_人工智能平台PAI(PAI) | 手动部署Stable Diffusion WebUI服务

测试完方案后,您可以参考以下规则处理对应产品的实例,避免继续产生费用:释放1个PAI-EAS模型在线服务:登录PAI控制台,在模型部署模型在线服务(EAS)页面,单击进入EAS...

创建DSW实例_人工智能平台PAI(PAI) | 创建DSW实例

交互式建模(DSW)是PAI产品的云端机器学习开发IDE,为您提供交互式编程环境。在使用DSW前,您需要创建DSW实例。DSW支持通过控制台和Python SDK两种方式创建实例。本文为...

DSW常见问题_人工智能平台PAI(PAI) | DSW常见问题

DSW(Data Science Workshop)是PAI推出的云原生机器学习和数据科学开发平台,其中内置了Jupyterlab、WebIDE和terminal三种使用方式,同时也支持本地开发环境通过ssh登录...

PAI-RAG如何快速集成ElasticSearch搜索_人工智能平台PAI(PAI) | 基于EAS&Elasticsearch搭建RAG检索增强对话系统

背景信息EAS简介EAS(Elastic Algorithm Service)是PAI的模型在线服务平台,支持将模型部署为在线推理服务和AI-Web应用。EAS提供了弹性扩缩容和蓝绿部署等功能,可以...

查看服务实例云监控事件_人工智能平台PAI(PAI) | 查看服务实例云监控事件

在事件监控页签,产品选择机器学习,单击搜索,查看EAS系统事件。单击目标事件操作列下的详情,查看事件详情。事件详情示例如下。参数说明如下。参数说明Product产品code。...

微调、部署并实现Llama-3模型的高效推理_人工智能平台PAI(PAI) | Llama-3开源模型全托管灵骏最佳实践

阿里云PAI灵骏智算服务是面向大规模深度学习场景的智算产品,提供一站式的异构计算资源和AI工程化平台。本方案将为您介绍如何使用阿里云PAI灵骏智算服务,以及基于...

如何通过控制台创建短信发送计划_人工智能平台PAI(PAI) | 创建短信发送计划

用户增长插件基于机器学习算法提供用户圈选和触达能力。针对高风险的流失用户,您可以基于用户增长插件功能,通过控制台创建短信发送计划进行流失用户的触达和召回。...

Python脚本组件使用说明_人工智能平台PAI(PAI) | Python脚本

output_table_uri=args.output 3 o=init_odps()project_name,table_name,partition=parse_odps_url(output_table_uri)o.run_sql(f"create table{project_name}.{table_name}as select*from pai_...

使用ProxyClient方式远程连接DSW_人工智能平台PAI(PAI) | ProxyClient方式

如果您希望通过本地工具(例如VSCode或Terminal)远程连接DSW实例进行机器学习开发,可以使用DSW提供的ProxyClient客户端代理工具。该工具允许您通过SSH远程连接DSW实例,...

什么是XGBoost预测算法组件_人工智能平台PAI(PAI) | XGBoost预测

XGBoost算法在Boosting算法的基础上进行了扩展和升级,具有较好的易用性和鲁棒性,被广泛用在各种机器学习生产系统和竞赛领域,该算法支持分类和回归。XGBoost预测组件...

部署和调用RAG对话系统服务_人工智能平台PAI(PAI) | 大模型RAG对话系统

配置机器学习模型。Embedding Model Name:系统内置四种模型供您选择,将自动为您配置最合适的模型。Embedding Dimension:选择Embedding Model Name后,系统会自动进行配置,无需...

特征平台与,特征生产_人工智能平台PAI(PAI) | 特征平台与特征生产

前提条件在开始执行操作前,请确认您已完成以下准备工作:依赖产品具体操作人工智能平台PAI已开通PAI服务并创建PAI工作空间,操作详情请参见开通PAI并创建默认工作...
< 1 2 3 4 ... 75 >
共有75页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用