本文描述Serverless 工作流支持的所有系统权限策略及其对应的权限描述,供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合,可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制(RAM...
您可以使用云工作流和函数计算轻松构建ETL离线数据处理系统,实现更灵活、成本更低的数据处理解决方案。您无需管理底层服务器资源,从而更加聚焦于业务逻辑本身。背景信息 随着云计算、人工智能、物联网等新技术的应用普及,人类产生的数据...
Serverless方案 视频处理工作流系统 如果您需要加快大视频的转码速度或者完成各种复杂的组合操作,可以通过 云工作流 编排函数实现功能强大的视频处理系统。方案架构图如下。当用户上传一个MP4格式的视频到OSS,OSS自动触发 云工作流 流程...
关于视频处理工作流系统的Demo及操作步骤,请参见 视频处理工作流系统。Serverless方案优势 提高工程效率 对比项 Serverless方案 传统自建方案 基础设施 无 需要您采购和管理。开发效率 只需专注业务逻辑的开发,配合Serverless Devs编排和...
自定义代码错误 除了函数计算和 Serverless 工作流 系统常见的错误类型外,您也可以自定义错误类型,在函数代码中主动抛出异常,方便将函数执行的状态或错误传递给 Serverless 工作流,然后 Serverless 工作流 再根据流程对任务进行重试或...
System:系统工作流。Common:用户创建工作流。Common CreateTime string 工作流创建时间 2022-11-27T10:02:12Z ModifiedTime string 工作流最后修改时间 2022-11-29T02:06:19Z ActivityResults string 工作流任务各节点结果。Json格式,...
异步调用:事件在写入到工作流内部队列后返回结果,工作流系统会保证该消息被可靠地处理。双向集成调度 调度名称 标准执行模式工作流调用方式 快速执行模式工作流调用方式 定时调度 异步调用 同步调用 SLS调度 异步调用 同步调用 MNS调度 ...
FnF.ALL 捕获 云工作流 系统的所有错误。常见错误处理示例 基础错误重试 退避错误重试 复杂重试策略 基础错误重试 本示例中如果“my-error-handle-example”集成调用产生错误,且命中 MyCustomException1,则依照策略最大重试3次,每次重试...
背景信息 本文为您提供工作流编辑的相关操作介绍,具体如下:新建工作流 编辑工作流 配置工作流调度 执行工作流 查看工作流运行记录 工作流可执行操作 前提条件 已创建项目,详情请参见 项目管理。已编辑好作业,详情请参见 作业编辑。新建...
在工作流列表,双击发电厂输出电力预测工作流,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 通过 相关系数矩阵 组件,观察各特征对输出电力PE的影响。工作流运行完成后,您可以右键单击画布中的 相关系数...
在工作流列表,双击 推荐解决方案-etrec召回 工作流,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。组件编号 描述 1 行为权重。2 准备Item-to-Item30天的训练样本。3 通过对用户历史交互的Item进行加权统计,提高了召回U2...
在工作流列表,双击 文本分析-新闻分类 工作流,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 增加序列号。本工作流的数据源以单个新闻为单元,需要增加ID列作为每篇新闻的唯一标识,便于算法计算。② 分词...
在工作流列表,双击 异常行为风控,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 工作流的数据集。② 特征工程:通过 one-hot编码 组件将字符型特征转化为数值型。通过 归一化 组件将所有数据限定至0~1之间...
在工作流列表,选择推荐算法-商品推荐工作流,单击 进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 根据关联规则生成推荐列表。将7月份之前的购物行为作为数据源,先通过SQL脚本获取用户购买行为数据,再使用...
在工作流列表,选择农业贷款预测的回归算法实现工作流,单击 进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 读数据表读入的数据为工作流数据集,包括:贷款训练集:共一百条历史贷款数据,包括 farmsize 及 ...
在工作流列表,双击 基于外卖评论的舆情风控 工作流,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 数据源,即评论数据。② 停用词。可以过滤助动词及标点符号,需要手动上传停用词表,示例如下。③ 文本...
在工作流列表,双击 流失用户监控 工作流,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 工作流的数据集。② 通过 one-hot编码 组件和 SQL脚本 实现特征工程建模,将原始字符型特征转化为数值型。以目标字段...
在工作流列表,选择心脏病预测案例工作流,单击 进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 数据预处理,主要对数据进行去噪、缺失值填充及类型变换操作。因为每个样本只会患病或健康,所以心脏病预测可以...
在工作流列表,双击 用户窃电识别 工作流,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 统计分析:通过 相关系数矩阵 组件,观察各特征对是否窃漏电的影响。通过 数据视图,查看各特征列与目标列的数据分布...
在工作流列表,双击 在线预测-中学生成绩预测 工作流,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 数据预处理。使用 SQL脚本 组件将文本数据结构化:将源数据中的 yes 和 no 分别转换为 0 和 1。对于多...
在工作流列表,双击 图算法-金融风控实验,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 首先通过 最大联通子图 组件将数据中的群体分为两部分,并赋予 group_id。然后通过 SQL脚本 组件和 JOIN 组件去除图...
在工作流列表,双击 基于评分卡的信用卡消费分析,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 将输入数据集拆分为训练数据集和预测数据集。② 分箱 组件类似于One-Hot编码,可以根据数据分布将数据映射为...
在工作流列表,双击 推荐解决方案-向量召回 工作流,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。组件编号 描述 1 DSSM_Recall向量召回模型样本。2 使用FG模块编码样本,产出DSSM_Recall向量召回模型的样本。rec_sln_...
在工作流列表,双击 雾霾天气预测 工作流,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 数据导入及预处理:通过 读数据表 组件,导入数据源。通过 类型转换 组件,将STRING类型的数据转换为DOUBLE类型。...
在工作流列表,双击 基于对象特征的推荐 工作流,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① 特征工程。将仅有4个字段的原始数据通过特征工程的方法进行数据维度扩充,该实验中的特征包括推荐对象的特征和...
在工作流列表中,双击目标工作流,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。组件 描述 LLM-敏感信息打码-1 将敏感信息打码。例如:将邮箱地址字符替换成[EMAIL]。将手机电话号码替换成[TELEPHONE]或[MOBILEPHONE]。将...
在工作流列表,双击 推荐召回-GraphEmbedding算法 工作流,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。区域 描述 ① User&Item 行为表,包括如下字段:user:BIGINT类型,表示用户ID。item:BIGINT类型,表示物品ID。...
运行环节 用户在Designer画布直接执行Notebook组件、整个工作流或 使用DataWorks周期性调度工作流,系统会启动一个DLC任务来执行jupyter nbconvert转换后的Notebook文件。重要 如果资源组选择按量付费,则会根据DLC任务执行时长进行计费,...
选中刚才创建好的模板工作流,并单击 进入工作流。系统根据预置的模板,自动构建工作流。本方案使用默认配置。如果您需要对模板预置的参数进行调整,可以参考 图像分类训练 组件文档。在画布左上方,单击运行按钮,运行工作流。构建目标...
在工作流列表,双击 推荐解决方案-特征工程 工作流,进入工作流。系统根据预置的模板,自动构建工作流,如下图所示。节点 描述 1 物料表预处理:将Tag特征分隔符替换为 chr(29)供后续特征生成步骤(FG)使用。产出是否是新上架物料的特征。...
工作流事件告警 通过配置条件来订阅Flink工作流的系统事件告警,支持事件批量告警配置,工作流详情请参见 管理工作流。获取工作流节点的资源ID。登录 云监控控制台。在左侧导航栏,选择 事件中心 系统事件。在 事件监控 页签,产品选择 ...
Cromwell 是 Broad Institute 开发的工作流管理系统,当前已获得 阿里云批量计算服务 的支持。通过 Cromwell 可以将 WDL 描述的 workflow 转化为批量计算的作业(Job)运行。用户将为作业运行时实际消耗的计算和存储资源付费,不需要支付...
系统内置函数 以下为 云工作流 的系统内置函数,您可以直接使用。arrayContains 介绍:用于判断数组中是否包含某元素。参数:[]any 返回值:bool 使用示例:arrayContains(["Tom",10],10)arrayContains(["Tom",10],"Jack")输出示例:true ...
AliyunFnFReadOnlyAccess 是阿里云管理的产品系统策略,您可以将 AliyunFnFReadOnlyAccess 授权给 RAM 身份(RAM 用户、RAM 用户组和 RAM 角色),本策略定义了 只读访问函数工作流(FnF)的权限。策略详情 类型:系统策略 创建时间:2019-...
AliyunFnFFullAccess 是阿里云管理的产品系统策略,您可以将 AliyunFnFFullAccess 授权给 RAM 身份(RAM 用户、RAM 用户组和 RAM 角色),本策略定义了 管理函数工作流(FnF)的权限。策略详情 类型:系统策略 创建时间:2019-07-09 06:55:...
AliyunDevsFnFServicesDeployPolicy 是阿里云管理的产品系统策略,您可以将 AliyunDevsFnFServicesDeployPolicy 授权给 RAM 身份(RAM 用户、RAM 用户组和 RAM 角色),本策略定义了 FunctionAI部署工作流相关服务所需权限策略。...
云工作流 支持创建标准和快速两种模式的工作流,关于两种模式的更多信息,请参见 标准工作流和快速工作流。更多操作,请参见 基于空白画布创建工作流。编辑上一步创建的工作流。编辑流程。您可以选择 CloudFlow Studio 编辑或 YAML 编辑两...
重要 对于已经设置了资源队列的工作流节点,如果后续修改了工作流所对应的资源队列,系统仍然会以工作流节点的配置为准。说明 如果您的任务来源为SQL开发,您还需配置任务参数。任务参数默认继承任务模板,您可以通过修改任务模板来调整...
此外,如果保存工作流定义时,您设置了 超时告警 参数,一旦工作流触发了超时告警规则,系统也会自动释放集群。如果您未设置 超时告警,系统会在工作流运行超过1天后自动释放集群。补数 指运行指定时间范围内的工作流定义,根据补数策略...