本文为您介绍DataWorks中，工作空间、业务流程、解决方案、组件、任务、实例、业务日期、定时时间、提交、脚本开发、资源、函数和输出名称等基本概念。工作空间 工作空间 是DataWorks管理任务、成员，分配角色和权限的基本单元。工作空间...
true ScriptDetails object 脚本 API 的详情，只有脚本 API 返回。Script string SQL 脚本。select a from t IsPagedResponse boolean 返回是否分页。true ScriptRequestParameters object[]脚本 API 的请求参数列表。ColumnName string ...
查询脚本支持Call和DDL、DQL、DML语法。您可以通过查询脚本创建管理Catalog、表、数据查询，可以使用explain语法查看执行计划定位问题，也可以实现对Paimon的管理。功能 对SQL语法进行校验，校验失败无法运行。支持脚本全部语句运行和选中...
数据服务支持通过脚本模式或向导模式生成API，相对于向导模式，您可以自行编写API的查询SQL，支持多表关联、复杂查询和聚合函数等功能，满足您个性化查询需求。本文为您介绍如何通过脚本模式生成API。前提条件 配置API前，请先在 工作空间...
无 工作流能力升级 新增 一个任务可被多个工作流依赖，工作流节点支持预览任务信息。无 操作审计能力升级 新增 ActionTrail支持子账号、角色级别操作审计。无 日历能力升级 新增 支持应用级别日历，以便配置整个应用下的所有任务。应用级别...
自定义算法组件 包括SQL脚本、Python脚本、PyAlink脚本等自定义算法组件，可以满足您更加定制化的算法工作流串联需求。从实现框架及支持的计算资源来区分 包括Alink框架和PAICommand框架，两种框架的算法组件各自具有一些独特的功能特性：...
PAI提供了工作空间维度的事件中心，您可以创建事件规则，以跟踪和监控DLC任务或工作流任务的状态，或者基于AI资产管理-模型版本准入状态变化触发下游事件。本文为您介绍如何在工作空间的事件中心创建事件规则。使用限制 仅支持在华北6...
本文为您介绍如何基于图算法，实现金融风控。背景信息 图算法通常适用于关系网状的业务场景。与常规结构化数据不同，图算法将数据...工作流运行结束后，右键单击区域③中的 SQL脚本，在快捷菜单，单击 查看数据，即可查看每个人的欺诈概率。
脚本模式：通过直接编写数据同步的JSON脚本来完成数据同步开发，适合高级用户，学习成本较高。脚本模式可以提供更丰富灵活的能力，实现精细化的配置管理。5 数据迁移结果验证 完成数据导出操作后，在OSS控制台查看导入的数据。增量同步流程...
Dataphin支持将已下载的管道脚本上传至系统进行二次开发。本文为您介绍如何上传管道脚本。前提条件 已下载管道脚本，详情请参见 下载管道脚本。背景信息 上传管道脚本，详情请参见 数据引入权限列表。操作步骤 登录 Dataphin控制台。在...
工作原理 创建 App：创建 App 时，将运行作业需要的软件或脚本安装在自定义的镜像中，并设置资源的默认配置，以及输入输出的格式。提交 App 作业：提交作业时，按照上述资源配置启动虚拟机镜像或 Docker 镜像，使用用户输入的数据运行软件...
tar-xzf ecs_mq_2.0.tgz 执行以下命令，更换工作路径。cd ecs_mq/执行以下命令，运行 ecs_mq 脚本。bash install.sh<操作系统名称><操作系统主版本号>说明 请您根据实际环境替换命令中的<操作系统名称>和<操作系统主版本号>。以Red Hat ...
本文为您介绍如何从控制台访问DSW实例，以及介绍DSW实例界面的功能特性，包括Notebook、WebIDE和Terminal模块的菜单栏、工具栏、工作区等，帮助您快速理解并熟练掌握界面布局。前提条件 已创建DSW实例，具体操作，请参见 创建DSW实例。控制...
在使用时按照需要打开或关闭多日期循环执行开关，在整个工作流发布至周期性调度之前 切记关闭 多日期循环执行开关，避免生产环境下产生不需要的重复执行补数据任务。节点上配置的并发数仅能控制当前节点的并发，如果有多个节点都需要补数据...
本文介绍了 Serverless 工作流 的回调功能。相比较轮询，使用回调有效地降低了延迟、减少了轮询对服务器造成的不必要压力。另外，回调功能配合队列可以实现对非FC任务的编排，将 Serverless 工作流 的编排范围扩展到任意类型的计算资源。...
本文将介绍如何使用自定义节点添加脚本。前提条件 已完成构建混合弹性容器集群（弹性ECS）步骤5之前的操作。步骤一：编写自定义节点添加脚本 您可以通过以下两种方式编写自定义节点的脚本。方式一：Kubernetes二进制文件搭建 kubelet配置的...
SQL脚本是自定义SQL组件，您可以通过SQL脚本编辑器编写SQL语句，并提交至MaxCompute执行。本文为您介绍SQL脚本的组件配置和使用场景。组件配置 Designer 仅支持通过可视化方式，配置SQL脚本组件的参数，组件参数配置如下所示。参数 描述 ...
1、准备数据库初始化sql脚本 当部署应用实例后，用于建表或插入基础数据等数据库初始化工作。创建user数据表，并插入两条初始化数据*/*/CREATE DATABASE demoDB GO CREATE TABLE[demoDB].[dbo].[user]([id]bigint NOT NULL,[gmt_create]...
对于训练作业，estimator.fit 方法的 inputs 是字典，对应的每一个输入数据都是一个Channel，Key是Channel名，Value是数据存储路径，训练作业脚本可以通过 PAI_INPUT_{ChannelNameUpperCase} 环境变量获取到输入数据挂载到工作容器内的数据...
边缘脚本（EdgeScript，简称ES）是一个可供您快速实现 DCDN 定制配置的工具箱，当 DCDN 控制台上的标准配置无法满足您的业务需求时，可以尝试使用边缘脚本简单编程实现。边缘脚本通过简单易学的语法和庞大的函数库，能够像积木式地组合出...
边缘脚本（EdgeScript，简称ES）是一个可供您快速实现 CDN 定制配置的工具箱，当 CDN 控制台上的标准配置无法满足您的业务需求时，可以尝试使用边缘脚本简单编程实现。边缘脚本通过简单易学的语法和庞大的函数库，能够像积木式地组合出个性...
边缘脚本（EdgeScript，简称ES）是一个可供您快速实现 CDN 定制配置的工具箱，当视频点播控制台上的标准配置无法满足您的业务需求时，可以尝试使用边缘脚本简单编程实现。边缘脚本通过简单易学的语法和庞大的函数库，能够像积木式地组合出...
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发和运行调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化水平...
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发、部署、调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化...
数据开发为用户提供一站式计算节点开发能力，通过对数据加工流程的开发和运行调试等环节的一体化管理，数据开发实现数据加工工作流编排、加工逻辑的复用，大幅提高数据开发效率。数据开发帮助用户优化智能系统的架构，提高系统的工程化水平...
配置组件 方法一：可视化方式 在Designer工作流页面添加 Modularity 组件，并在界面右侧配置相关参数：参数类型 参数 描述 字段设置 源顶点列 边表的起点所在列。起始点标签列 边表起点的群组。目标顶点列 边表的终点所在列。目标点标签列 ...
数据同步支持通过配置脚本来新建数据同步任务。本文主要介绍如何新增脚本同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加同步任务目录，...
数据同步支持通过配置脚本来新建数据同步任务。本文主要介绍如何新增脚本同步任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标端的物理表同步，具体操作，请参见 获取物理表。已添加同步任务目录，...
新增脚本同步任务后，需对任务进行上线操作，脚本同步任务上线后会按照创建任务中设置的调度周期执行。本文介绍如何上线脚本同步任务。前提条件 已新增脚本同步任务，具体操作，请参见 新增脚本同步任务。操作步骤 登录企业数据智能平台。...
新增脚本同步任务后，需对任务进行上线操作，脚本同步任务上线后会按照创建任务中设置的调度周期执行。本文介绍如何上线脚本同步任务。前提条件 已新增脚本同步任务，具体操作，请参见 新增脚本同步任务。操作步骤 登录 数据资源平台控制台...
ALIYUN:ECS:RunCommand类型用于在一台或多台ECS实例中执行一段Shell、PowerShell或者Bat类型的脚本。语法 {"Type":"ALIYUN:ECS:RunCommand","Properties":{"Parameters":Map,"Description":String,"Timeout":Integer,"ContentEncoding":...
准备工作 将MongoDB的离线数据迁移至Lindorm宽表需要完成以下准备工作。MongoDB的数据准备如下：{"id":ObjectId("624573dd7c0e2eea4cc8*"),"title":"MongoDB教程","description":"MongoDB是一个NoSQL数据库","by":"菜鸟教程","url":...
手动执行功能可以批量选择在已有节点上运行指定脚本，以实现个性化需求，手动执行脚本的详情，请参见 手动执行脚本。引导操作类似手动执行，在集群创建时或者创建完成后，您可以通过引导操作功能，完成很多目前E-MapReduce集群尚未支持的...
公共格式 API版本和元信息 apiVersion:工作流格式的版本 metadata:name:工作流名 identifier:工作流标识 version:工作流版本 provider:工作流提供方 displayName:工作流显示名 annotations:工作流注解，目前只支持官方注解 字段名称 类型 ...
在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。在左侧导航栏，单击 图标，将鼠标悬停在 配置化同步 上，单击 图标。在 配置化同步 页面，单击目标同步任务 操作 列的 监控。跳转到 离线同步实例 页面，可查看同步任务运行详情...
在顶部菜单栏，单击 图标，选择目标工作组，单击 资产加工。在左侧导航栏，单击 图标，将鼠标悬停在 配置化同步 上，单击 图标。在 配置化同步 页面，单击目标同步任务 操作 列的 监控。跳转到 离线同步实例 页面，可查看同步任务运行详情...
该组件的作用是使用EasyRec里的add_feature_info_to_config.py脚本，给推荐全链路深度定制开发平台PAIREC生成的临时文件template.config，添加特征信息。本文为您介绍该组件的配置方法。前提条件 已开通OSS并完成授权，详情请参见 开通OSS...
在左侧导航栏单击 工作空间列表，在工作空间列表页面中单击待操作的工作空间名称，进入对应工作空间内。在工作空间页面的左侧导航栏选择 模型开发与训练>可视化建模（Designer），进入Designer页面。步骤二：构建工作流 在 Designer 页面，...
为了提高运维工作的安全性，运维员在创建运维任务后，管理员可以对其进行管理，例如查看运维任务详情，停止或删除运维任务等。同时管理员还可以创建公共的运维脚本，供运维员使用。本文介绍管理员如何管理运维任务以及创建公共运维脚本。...
通过数据过滤器可以将接口（数据分析服务、自定义接口或服务开发工作台）返回的数据转换成您所需要的内容，并展示在Web可视化组件上。本文介绍数据过滤器的使用方法。过滤方法 过滤方法支持数据过滤脚本和数据表配置两种过滤方法：数据过滤...