您可以将应用开发过程中产生的大量的参数和变量等信息，提取到配置文件中统一管理和运维。代码运行时，可以从该配置文件中获取相应的变量和参数，以便快速更改变量和参数，降低代码维护成本。本文介绍如何在 Serverless应用引擎SAE...
特征加载，这里和排序之前的特征加载配置是一样的。参考 特征配置。模型调用，配置与精排里的排序配置也保持一致。参考 算法配置。一系列 Action 操作，这里可以多种操作，比如调用粗排模型之后，需要先排序，然后再获取得分高的部分item。...
本文介绍在蚂蚁隐私计算服务平台新建特征组的方法。操作步骤 登录 蚂蚁隐私计算服务平台。在左侧导航栏，选择 我的资源>数据资产。在 数据资产管理 页面，单击 特征组 页签，然后单击 新建特征组。在 新建特征组 面板中，单击 新增特征，...
日志服务智能异常分析App提供模型训练和实时巡检功能，支持对日志、指标等数据进行自动化、智能化、自适应地模型...特征工程：包括同环比特征、平移特征、趋势特征、窗口特征、时间特征等。集成模型：通过集成多个树模型来构建最终的模型。
采集配置策略，初始化主要配置详情如下表：字段名称 配置初值 字段说明 配置名称 031001 配置的名称，钉钉应用ID 日志路径/home/logs/∗∗/031001.log 日志采集路径（指定文件夹下所有符合文件名称的文件都会被监控），文件名称可以是完整...
具体说明如下表所示：任务类型 参数 是否必选 参数类型 说明 特征提取 field1_name 是 VARCHAR 需要进行特征提取（向量化）的文本常量。文生图 field1_name 是 VARCHAR 表（From条件中指定的表）中的文本列名或文本常量。语义检索 field1_...
而这些统计特征可以从用户特征、物品特征来看，例如用户在某个类目下、1天/7天/15天总共的点击次数、购买次数，物品是否是3天内新出现的物品；用户最近连续点击的50个物品构造的id序列（7天内）等等。其中透传特征字段是指不参与统计特征...
特征一致性检查任务管理 API 标题 API概述 CreateFeatureConsistencyCheckJobConfig 创建特征一致性检查任务配置 创建特征一致性检查任务配置。CreateFeatureConsistencyCheckJob 创建特征一致性检查任务 创建特征一致性检查任务。...
检测敏感数据的原理为：本数据特征规则满足配置的特征规则且不满足配置的例外规则。字典匹配：输入关键词后按Enter。单个关键词长度为1~128个字符，可配置多个关键词。注意关键词内不能含有逗号，否则会认为是两个或多个按逗号分隔开的关键...
例如，主键名称为id，数值提取规则配置为$.value.id 列生成模式 Tablestore列值生成方式。无 消息Key存储格式 Kafka的Key字段的存储方式。String模式：将Key字段的内容转换为String类型后存储到一列中，列名为key。JSON模式：将JSON中的每...
系统提取已有ECS实例的配置信息创建一个默认伸缩配置，作为自动创建ECS实例的模板，提取的配置信息包括实例的实例规格、基础镜像、网络类型、安全组、登录密码、标签等。如果某些配置不符合业务要求，您可以在伸缩组创建完成后根据需要修改...
配置在线特征 在多方安全模型的在线预测过程中需要使用在线特征，如果需要在项目中使用在线特征，需要将发布的在线特征授权到 MPC 项目内。在 资源配置 面板，单击 数据配置。在 在线特征 区域的测试环境中，单击 添加特征接口授权。在 ...
通过数据诊断可以分析用户特征、物品特征中特征的有效性，分析用户行为表是否正确，并且决定推荐算法定制中的特征和配置参数。推荐算法定制可以帮助用户生成相关代码，快速产出召回和排序相关的数据和模型。二、资源选型 构建完整的推荐...
配置示例 使用正则模式提取content字段的值，并设置字段名为 ip、time、method、url、request_time、request_length、status、length、ref_url 和 browser。配置示例如下：原始日志"content":"10.200.*.*-[10/Aug/2022:14:57:51+0800]\...
变更历史 变更时间 变更内容概要 操作 2023-08-01 API 内部配置变更，不影响调用 看变更集 变更项 变更内容 API 内部配置变更，不影响调用。2023-08-01 API 内部配置变更，不影响调用 看变更集 变更项 变更内容 API 内部配置变更，不影响...
变更历史 变更时间 变更内容概要 操作 2023-08-01 API 内部配置变更，不影响调用 看变更集 变更项 变更内容 API 内部配置变更，不影响调用。2023-08-01 API 内部配置变更，不影响调用 看变更集 变更项 变更内容 API 内部配置变更，不影响...
组件截图 二、参数说明 参数名称 参数说明 选择配置文件 用户如果在本项目某个工作流中使用【数据预处理】或者【特征生成】类组件进行建模，运行成功之后，则可以在其他任务中选择配置文件。注意：建模文件的名称格式为${工作流名称}_${...
步骤二：提取用户特征向量 提取用户浏览关键词。根据用户的新闻浏览日志，我们很容易得到用户的浏览关键词。例如，执行以下 SELECT 得到用户 person_id 为 9527 的浏览关键词。select keywords from Person p,Browses_History bh,News n ...
变更历史 变更时间 变更内容概要 操作 2023-08-01 API 内部配置变更，不影响调用 看变更集 变更项 变更内容 API 内部配置变更，不影响调用。2023-08-01 API 内部配置变更，不影响调用 看变更集 变更项 变更内容 API 内部配置变更，不影响...
日志提取字段 根据 NGINX日志配置 自动提取对应的日志字段（Key）。解析失败时保留原始字段 选中 解析失败时保留原始字段，则解析失败时，将保留原始字段。解析成功时保留原始字段 选中 解析成功时保留原始字段，则解析成功时，将保留原始...
视频DNA服务实现对视频中的图像、音频等指纹特征的提取和比对，解决重复视频查找、视频片段查源、原创识别等问题。产品信息：视频DNA 配置文档：视频DNA 智能标签 智能标签服务通过分析视频中视觉、文字、语音、行为等信息，结合多模态信息...
例如在推荐场景中，并行执行过去7天的行为数据特征提取SQL补数据任务。使用限制 仅支持天级别的补数据循环。在使用时按照需要打开或关闭多日期循环执行开关，在整个工作流发布至周期性调度之前 切记关闭 多日期循环执行开关，避免生产环境...
接入流程 ADP-Local提供的日志采集器需要先配置日志采集策略，然后加载线上日志，配置字段提取方式，并生成字段列，可以对字段列进行打标并生成Prometheus Metrics。接下来我们可以根据提取的字段进行查询和日志监控。默认采集配置 ADP底座...
可视化配置组件参数 输入桩 输入桩（从左到右）数据类型 建议上游组件 是否必选 数据 无 读数据表 特征工程 数据预处理 是 模型 无 读数据表 否 组件参数 页签 参数 描述 字段设置 标签列名 输入表中的标签列名。特征列名数组 如果您已经...
可视化配置组件参数 输入桩 输入桩（从左到右）数据类型 建议上游组件 是否必选 数据 无 读数据表 特征工程 数据预处理 是 模型 Lasso模型（用做增量训练）读数据表（模型数据表）Lasso回归训练 否 组件参数 页签 参数 描述 字段设置 标签...
动作配置 待提取字段：location 提取正则表达式：([a-zA-z]+-[a-zA-z]+)-(.*)填充的字符：region、datacenter 执行结果 匹配更新 当系统检测到事件的指定字段中存在某段内容时，就将设置的字段值填充到目标字段中。场景 告警字段："message...
kafka_to_maxcompute MaxCompute表入参 选择MaxCompute表后，此处会展示表的列名和类型信息，配置 数据提取规则 即可。下面是一条消息示例，本示例中Topic列对应的值从Topic字段提取，则定义 数据提取规则 为$.topic。{ 'topic':'guide-...
FeatureConfig配置 常用特征主要包括：IdFeature（离散值特征/ID类特征）例如 user_id、item_id、category_id、age 及 星座 均属于IdFeature。RawFeature（连续值类特征）RawFeature类特征可以在 Designer 中先进行离散化（例如等频、等距...
异常检测用于检测连续值和枚举值类特征的数据，帮助您挖掘数据中的异常点。背景信息 异常检测的方法包括箱型图（Box-plot）和AVF（Attribute Value Frequency）：箱型图用于检测连续值类特征的数据，根据箱线图最大值和最小值检测异常特征...
由于嵌入水印的原理是将水印原子信息嵌入到不同特征的数据中去，因此源数据特征越多，越能嵌入完整的水印信息、提高提取成功率，并且即使缺失部分数据也不影响水印提取。所以对需要嵌入水印的数据有如下要求：待嵌入水印的源数据需要大于...
识别特征用于统一管理内置识别表达式，如手机号、身份证号等，本文为您介绍系统内置特征和自定义识别特征。权限说明 安全管理员支持新建及管理识别特征。自定义识别特征 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 ...
识别特征用于统一管理内置识别表达式，如手机号、身份证号等，本文为您介绍系统内置特征和自定义识别特征。权限说明 安全管理员支持新建及管理识别特征。自定义识别特征 在Dataphin首页，单击顶部菜单栏的 资产。按照下图操作指引，进入 ...
创建特征一致性检查任务配置。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 POST/api/v1/...
更新特征一致性检查任务配置详细信息，例如更新名称。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求语法 ...
通过配置回源规则，您可以为不同特征的用户请求配置不同的回源HOST、回源端口、回源协议、回源SNI和DNS解析记录。不同套餐的支持情况 基础版 标准版 高级版 企业版 支持配置的规则数量 10条 25条 50条 125条 回源HOST 不支持 不支持 不支持...
在 创建模型训练作业 配置向导的 数据特征配置 步骤中，完成如下配置。在 数据特征配置 页签下，完成如下配置。本案例针对无异常标签的数据，因此需要通过异常注入方式先获取异常标签。重要 需要在SQL语句中添加LIMIT子句，避免数据提取不...
在 创建模型训练作业 配置向导的 数据特征配置 步骤中，完成如下配置。在 数据特征配置 页签下，完成如下配置。本案例针对有异常标签的数据，因此可直接使用SQL语句获取带标签的指标序列。重要 需要在SQL语句中添加LIMIT子句，避免数据提取...
特征的配置对应配置总览中的 FeatureConfs，FeatureConfs 是一个 Map[string]object 结构，其中 key 为场景名，可以根据不同场景配置不同的特征 特征加载 在精排之前，需要从特征存储源里获取到 user 或者 item 的特征数据。在某些情况下，...
视频DNA FpShot 用来唯一标记一个视频，实现对视频中的图像、音频等指纹特征的提取和比对，解决重复视频查找、视频片段查源、原创识别等问题。智能封面 Cover 通过对视频内容的理解，结合画面和海量用户行为数据，基于算法选出最优的关键帧...
特征组 特征组包含特征列表和特征服务的配置信息，一个特征组可复用于多个项目的多个模型中。特征列表 特征列表为某一类特征服务支持的特征字段集合。这些特征服务的服务地址不同，但有相同的协议、出参和入参。特征映射 将模型训练中的入...