SQL组件是一种带有多个输入参数和输出参数的SQL代码模板。使用SQL代码处理数据表时,通过过滤、连接和聚合数据源表,获取结果表。您可通过创建数据开发(DataStudio)的SQL组件节点使用组件,基于组件快速新建数据处理节点,提高开发效率。...
SQL脚本是自定义SQL组件,您可以通过SQL脚本编辑器编写SQL语句,并提交至MaxCompute执行。本文为您介绍SQL脚本的组件配置和使用场景。组件配置 Designer 仅支持通过可视化方式,配置SQL脚本组件的参数,组件参数配置如下所示。参数 描述 ...
SQL组件是一种带有多个输入参数和输出参数的SQL代码模板。使用SQL代码处理数据表时,通过过滤、连接和聚合数据源表,获取结果表。您可通过创建数据开发(DataStudio)的SQL组件节点使用组件,基于组件快速新建数据处理节点,提高开发效率。...
组件是一种带有多个输入参数和输出参数的SQL代码过程模板,而SQL代码过程可通过引入一个或多个源数据表,并进行过滤、连接、聚合等操作,加工出业务所需的目标表,因此,您可通过组件快速加工出符合业务需求的目标表。本文为您介绍组件的...
在普通的SQL组件基础上增加了 多日期循环执行 功能,用于并行执行某段时间内 天级别 SQL任务。例如在推荐场景中,并行执行过去7天的行为数据特征提取SQL补数据任务。使用限制 仅支持天级别的补数据循环。在使用时按照需要打开或关闭多日期...
此时,组件的开发者可将该SQL过程抽象为一个SQL组件节点,将可变的输入表抽象为输入参数,可变的输出表抽象为输出参数,实现SQL代码的复用。SQL组件概述 PyODPS 3 开发MaxCompute的PyODPS任务,PyODPS 3节点底层Python语言版本为Python 3。...
步骤二:使用组件 您需参考 引用SQL组件 创建 xc_引用组件_get_top_n SQL组件节点,引用步骤一创建的 get_top_n 组件,并配置相应的参数值,步骤如下图。参数值说明如下:输入参数 myinputtable:为该参数指定一个输入表 company_sales_...
自定义算法组件 包括SQL脚本、Python脚本、PyAlink脚本等自定义算法组件,可以满足您更加定制化的算法工作流串联需求。从实现框架及支持的计算资源来区分 包括Alink框架和PAICommand框架,两种框架的算法组件各自具有一些独特的功能特性:...
08000 连接异常(CONNECTION EXCEPTION)08003 连接不存在(CONNECTION DOES NOT EXIST)08006 连接失败(CONNECTION FAILURE)08001 SQL客户端不能建立SQL连接(SQLCLIENT UNABLE TO ESTABLISH SQLCONNECTION)08004 SQL服务器拒绝建立SQL...
如果您的 SQL Server 不在本地,请填写您的 SQL Server 服务器的 IP 地址。在输入登录服务器的信息中选中使用指定的用户名和密码。测试时可以用 SA账号,密码不填。说明:前提是您的 SQL Server中 不要关闭 SA 这个账号。适用于 云服务器...
Microsoft SQL Server输出组件用于向Microsoft SQL Server数据源写入数据。同步其他数据源的数据至Microsoft SQL Server数据源的场景中,完成源数据源的信息配置后,需要配置Microsoft SQL Server输出组件的目标数据源。本文为您介绍如何...
Microsoft SQL Server输入组件用于读取Microsoft SQL Server数据源的数据。同步Microsoft SQL Server数据源的数据至其他数据源的场景中,您需要先配置Microsoft SQL Server输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍...
本文为您介绍如何配置Microsoft SQL Server输出组件。操作步骤 请参见 离线管道组件开发入口,进入离线单条管道脚本的开发页面。按照下图操作指引,进入 Microsoft SQL Server输出组件 对话框。在 Microsoft SQL Server输出配置 对话框,...
本文为您介绍如何配置Microsoft SQL Server输出组件。操作步骤 请参见 离线管道组件开发入口,进入离线单条管道脚本的开发页面。按照下图操作指引,进入 Microsoft SQL Server输出组件 对话框。在 Microsoft SQL Server输出配置 对话框,...
Microsoft SQL Server输入组件用于读取Microsoft SQL Server数据源的数据。同步Microsoft SQL Server数据源的数据至其他数据源的场景中,您需要先配置Microsoft SQL Server输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍...
Microsoft SQL Server输入组件用于读取Microsoft SQL Server数据源的数据。同步Microsoft SQL Server数据源的数据至其他数据源的场景中,您需要先配置Microsoft SQL Server输入组件读取的数据源,再配置数据同步的目标数据源。本文为您介绍...
按需扩容防护节点(一个防护节点支持处理5000 QPS的HTTP业务或2000 QPS的HTTPS业务)存储组件:1台服务器 管控组件:2台(及以上)服务器+1个负载均衡设备 防护组件:2台(及以上)服务器+1个负载均衡设备 高稳定性业务上线防护,追求业务...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name MaximalConnectedComponent-project algo_public-DinputEdgeTableName=MaximalConnectedComponent_func_test_edge-DfromVertexCol=flow_...
配置字段计算转换组件 过滤转换 配置过滤转换组件 加密转换 配置加密转换组件 解密转换 配置解密转换组件 流程组件 组件名称 组件配置 限速 配置限速流程组件 条件分发 配置条件分发流程组件 自定义组件 如需使用自定义组件,请先在...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name KCore-project algo_public-DinputEdgeTableName=KCore_func_test_edge-DfromVertexCol=flow_out_id-DtoVertexCol=flow_in_id-...
切换前 切换后 组件配置说明 Dataphin支持的组件及配置说明请参见下表:输入组件 组件名称 组件配置 MYSQL 配置MySQL输入组件 Oracle 配置Oracle输入组件 Vertica 配置Vertica输入组件 FTP 配置FTP输入组件 Hive 配置Hive输入组件 HBase ...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name TriangleCount-project algo_public-DinputEdgeTableName=TriangleCount_func_test_edge-DfromVertexCol=flow_out_id-DtoVertexCol=flow_...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name TreeDepth-project algo_public-DinputEdgeTableName=TreeDepth_func_test_edge-DfromVertexCol=flow_out_id-DtoVertexCol=flow_in_id-...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name Modularity-project algo_public-DinputEdgeTableName=Modularity_func_test_edge-DfromVertexCol=flow_out_id-DfromGroupCol=group_out_...
说明 如果该组件下游接入SQL脚本组件,则该分区过滤条件不生效,您需要在 SQL脚本 组件中配置过滤条件。参数 分区参数,通过该参数来过滤分区表数据。同时筛选多个分区使用半角逗号(,)分隔。如果未配置该参数,则表示输入全表。例如:...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name SSSP-project algo_public-DinputEdgeTableName=SSSP_func_test_edge-DfromVertexCol=flow_out_id-DtoVertexCol=flow_in_id-...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name PageRankWithWeight-project algo_public-DinputEdgeTableName=PageRankWithWeight_func_test_edge-DfromVertexCol=flow_out_id-...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name NodeDensity-project algo_public-DinputEdgeTableName=NodeDensity_func_test_edge-DfromVertexCol=flow_out_id-DtoVertexCol=flow_in_id...
过滤与映射组件可以对数据按照过滤表达式进行筛选,并且您可以修改输出字段名称。组件配置 您可以使用以下任意一种方式,配置过滤与映射组件参数。方式一:可视化方式 在 Designer 工作流页面配置组件参数。参数 描述 选择字段 选择要筛选...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name LabelPropagationClassification-project algo_public-DinputEdgeTableName=LabelPropagationClassification_func_test_edge-...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name EdgeDensity-project algo_public-DinputEdgeTableName=EdgeDensity_func_test_edge-DfromVertexCol=flow_out_id-DtoVertexCol=flow_in_id...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 场景4:在SQL脚本组件中执行PAI命令。PAI-name LabelPropagationClustering-project algo_public-DinputEdgeTableName=LabelPropagationClustering_func_test_edge-DfromVertexCol=flow_...
本文通过PAI提供的文本分析组件,实现简单的商品标签自动归类系统。背景信息 通常每件商品的描述会包含很多维度标签。例如,一双鞋子的商品描述可能是“少女英伦风系带马丁靴女磨砂真皮厚底休闲短靴”。一个包的商品描述可能是“天天特价...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 SQL脚本。PAI-name SplitSentences-project algo_public-DinputTableName="test_input"-DoutputTableName="test_output"-DdocIdCol="doc_id"-DdocContent="content"-Dlifecycle=30 参数...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 SQL脚本。PAI-name FilterNoise-project algo_public \-DinputTableName=”test_input”-DnoiseTableName=”noise_input”\-DoutputTableName=”test_output”\-DselectedColNames=”...
在左侧组件列表的搜索框中,搜索 SQL脚本,找到 SQL脚本 组件。将 SQL脚本 组件拖入右侧画布中,画布中将自动生成一个名称为 SQL脚本-1 的工作流节点。通过连线,将 SQL脚本-1 节点的 t1 输入源作为 读数据表-1 节点的下游节点。在画布中...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 SQL脚本。PAI-name regression_evaluation-project algo_public-DinputTableName=input_table-DyColName=y_col-DpredictionColName=prediction_col-DindexOutputTableName=index_output_...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 SQL脚本。PAI-name RandomSample-project algo_public-Dlifecycle="28"-DoutputTableName="test2"-Dreplace="false"-DsampleSize="500"-DinputPartitions="pt=20150501"-DinputTableName...
您可以使用SQL脚本组件进行PAI命令调用,详情请参见 SQL脚本。pai-name=lm_predict-project=algo_public-DinputFeatureTableName=input_data_table-DinputModelTableName=input_model_table-DmetaColNames=sample_key,label-...
特征尺度变换算法组件支持对稠密或稀疏的数值类特征进行常见的尺度变换。功能介绍 特征尺度变换的功能如下:支持常见的 log2、log10、ln、abs 及 sqrt 等尺度变化函数。支持稠密及稀疏数据格式。组件配置 您可以使用以下任意一种方式,配置...