混淆矩阵（Confusion Matrix）适用于监督学习，与无监督学习中的匹配矩阵对应。在精度评价中，混淆矩阵主要用于比较分类结果和实际测量值，可以将分类结果的精度显示在一个矩阵中。本文为您介绍混淆矩阵组件的配置方法。使用限制 支持的...
基于语料库构建单词同现矩阵，频繁项集数据挖掘、重复文档检测等。广告推荐：用户单击（CTR）和购买行为（CVR）预测。MapReduce流程说明 MapReduce处理数据过程主要分成Map和Reduce两个阶段。首先执行Map阶段，再执行Reduce阶段。Map和...
Delta Lake以数据为中心，围绕数据流走向（数据从流入数据湖、数据组织管理和数据查询到流出数据湖）推出了一系列功能特性，协助您搭配第三方上下游工具，搭建快捷、易用和安全的数据湖。背景信息 通常的数据湖方案是选取大数据存储引擎...
实时机器学习 通常在机器学习场景中，需要花费大量的时间处理数据，例如，数据清洗、转换和提取特征等，还需要对历史数据和实时数据进行处理。而Iceberg简化了工作流程，整个数据处理过程是一条完整的、可靠的实时流，其数据的清洗、转换和...
地理边界 通过配置地理边界geojson数据接口，可将提取到的区域GeoJSON边界数据应用到DataV中。配置方法同 基础平面地图 组件的 区域热力层 配置，具体请参见 地理边界geojson数据接口。表 1.配置项说明 配置项 说明 受控模式 打开开关，...
智慧城市人口财产主题分析 DataWorks MaxCompute 数据开发 以人口、房产等相关数据整合与人口特征提取为例，使用DataStudio 数据开发 模块。通过数据加工处理，并设置调度策略，实现数据处理的自动化，从而向您展示智慧城市项目下数据加工...
地理边界geojson数据接口 通过配置地理边界geojson数据接口，可将提取到的区域GeoJSON边界数据应用到DataV中。配置方法同 基础平面地图 组件的 区域热力层 配置，具体请参见 地理边界geojson数据接口。区域面数据接口 配置字段说明 字段 ...
数据源面板 地理边界geojson数据接口：通过配置地理边界geojson数据接口，可将提取到的区域GeoJSON边界数据应用到DataV中。配置方法同 基础平面地图 组件的 区域热力层 配置，具体请参见 数据源面板。区域面数据接口 字段 说明 adcode 地区...
是将从提取的行接收字段数据的 SPL 变量。record 或 variable,variable_2.中字段的数字和顺序必须与 SELECT 列表（属于游标声明中给出的查询）中返回的字段相匹配。对于 SELECT 列表中的字段，其数据类型必须与 record 中字段的数据类型或 ...
size int Query矩阵分块大小，性能相关，不建议修改（输入数据较小是不会触发矩阵分块）50000 matmul_strategy int 矩阵分块乘法策略，可选值：2、3、4（输入数据较小时不会触发矩阵分块）4 matmul_reducer_memory int 矩阵乘法Job1的...
修改默认全国范围的 area_tree.json 文件，提取浙江省范围的数据。区域层级关系为 省或直辖市>地市级>区县级。重要 用户如果有自定义的层级关系，可以自定义 area_id，只要保证 area_id 是唯一值。由于获取的JSON数据量比较大，不支持静态...
修改默认全国范围的 area_tree.json 文件，提取浙江省范围的数据。区域层级关系为 省或直辖市>地市级>区县级。文件的部分数据内容如下图所示。注意 用户如果有自定义的层级关系，可以自定义 area_id，只要保证 area_id 是唯一值。由于获取...
使用水印提取功能时，需要保证文件中数据超过200条，否则可能会出现水印提取失败（未提取到水印）的情况。水印嵌入 水印嵌入是指将标识信息嵌入到数据或文件中，使其具备一定的标识度。在创建结果集导出工单前设置水印 该方式需要在配置...
在EMR集群中，利用Hive和Spark对原始数据进行清洗和加工，提取业务所需的指标，例如日活跃用户、用户留存、某SKU的新增订单等。白天可以通过弹性伸缩机制，只保留部分节点。同时，可以启动一个包含Trino或Presto的环境，以满足白天数据分析...
例如，商品以图搜图特征提取模型通常需要在商品数据集上进行迁移学习，以便能更加准确地提取不同商品的视觉特征。您可以选择适合当前使用场景的方法，提取图像的特征，生成特征向量。向量检索 向量检索又称为最近邻(Nearest Neighbor ...
实现架构 分析型数据库MySQL版作为商品属性提取和图片管理的核心组件，数据读写流程如下所示。插入数据 应用端通过以下步骤向商品库中插入数据。应用端调用OSS服务，将图片插入OSS，获得对应的URL。说明 当前只支持HTTP和HTTPS协议的URL。...
函数分类 数据探索系统函数的类型包含分为以下几种：函数类型 说明 时间函数 处理日期、时间类型数据，实现加减日期、提取日期字段、获取当前时间、转换日期格式等业务处理能力。字符串函数 处理字符串类型数据，实现截取字符串、替换字符...
为了满足模型训练对数据格式的要求，确保数据能够以最适合的方式输入给模型，从而提升模型训练效果和整体训练效率，需要将原始数据转换为适合模型训练的格式。本文为您介绍PAI-TF数据转换方法。警告 公共云GPU服务器即将过保下线，您可以...
云原生多模数据库 Lindorm 计算引擎提供Lindorm CDC（Change Data Capture）数据源，您可以通过该数据源使用Spark SQL查询Lindorm实例其他引擎变更的数据。前提条件 Lindorm实例已开通LTS（Lindorm Tunnel Service）服务，具体请参见 购买...
整体概述 Dataphin的数据资产功能，基于数据资产管理的规范及方法论，帮助您对数据资产进行盘点评估：支持自动化提取分析元数据，可视化构建数据资产大图，便于管理者发现与了解数据资产价值。支持对数据生产中的计算、存储、安全、应用等...
整体概述 Dataphin的数据资产功能，基于数据资产管理的规范及方法论，帮助您对数据资产进行盘点评估：支持自动化提取分析元数据，可视化构建数据资产大图，便于管理者发现与了解数据资产价值。支持对数据生产中的计算、存储、安全、应用等...
数据同步服务：您可以通过 数据集成（DataWorks）任务，提取、转换、加载（ETL）数据到MaxCompute。数据投递：您可以通过DataHub、SLS、Kafka版服务的MaxCompute Sink Connector、Blink 将数据投递至MaxCompute。开源工具及插件：您可以...
单击完成训练的模型 操作 列的 图标，即可查看通过该模型提取的样本特征对样例数据识别的准确率。建议当准确率为100%时，再投入上线使用该模型。说明 如果模型训练的评估结果准确率达不到100%，则投入上线使用识别的数据可能会有较大误差。...
层级生成器是一款用于生成自定义下钻区域树形结构数据...单击 自定义区域下钻层 组件的数据源面板，选择 数据接口 页签，将 数据源类型 选择为 API，在下方URL编辑框内，将提取到的JSON API粘贴到数据输入框内。如下图所示。示例API链接如下。...
11.2 12.1、12.2 18.3、18.5 19.3、19.6、19.8、19.9、19.10、19.11、19.12、19.14 21 说明 使用前，请您自行查阅 Oracle官方文档 中Instant Client版本与数据库服务器版本之间的兼容矩阵，确保客户端与服务器之间可兼容交互。简介 oracle_...
可视化配置组件参数 输入桩 输入桩（从左到右）数据类型 建议上游组件 是否必选 user因子表 无 ALS矩阵分解 是 item因子表 无 ALS矩阵分解 是 待评分的输入数据 无 读数据表 读CSV文件 数据预处理 是 组件参数 页签 参数 描述 字段设置 ...
将提取到的JSON API粘贴到数据输入区。发布大屏，即可查看配置的自定义区域下钻层。表 1.配置项说明 配置项 说明 受控模式 打开开关，资产 初始化状态下不请求数据，仅通过回调ID或蓝图编辑器配置的方法发起请求数据；关闭开关，可以使用...
本文为您介绍如何通过DataWorks的数据集成功能，将从MongoDB提取的JSON字段迁移至MaxCompute。前提条件 开通MaxCompute和DataWorks。新增MaxCompute数据源。详情请参见 创建MaxCompute数据源。在DataWorks上完成创建业务流程，本例使用...
功能说明 动态特征提取组件是对输入变量的历史数据序列按照特定的计算方式进行处理，返回处理结果作为新的特征值。支持8种计算方式，包括最大值、最小值、平均值、标准差、线性趋势、变化趋势、一阶差分和二阶差分。计算逻辑原理 最大值：...
本文为您介绍如何通过DataWorks的数据集成功能，将从MongoDB提取的JSON字段迁移至MaxCompute。前提条件 开通MaxCompute。在DataWorks上完成创建业务流程，本例使用DataWorks简单模式。详情请参见 创建业务流程。在MongoDB上准备测试数据 ...
然后，利用分析型数据库MySQL版向量内置的文本转换为向量函数，将从新闻标题和新闻内容中提取出的关键词转换为新闻向量导入分析型数据库MySQL版向量数据库中，用于用户新闻推荐，具体实现流程如下图所示。整个新闻推荐系统由以下两个步骤...
开启安全访问代理 接入达梦数据库 新增 全面直接接入达梦数据库（DM），包括数据导入、数据查询、数据变更、数据导出、数据服务与数据可视化等功能。支持的数据库类型与功能 数据类目 新增 对表进行分类，便于管理人员、开发人员及运维人员...
规范定义是指以业务对象建模作为理论基础，构建总线矩阵，划分并定义主题域（数据域）、业务活动、业务对象、原子指标、业务限定、时间周期和派生指标。本文为您介绍在本教程中如何进行规范定义。基本概念 业务实体：业务对象 业务对象是...
规范定义是指以业务对象建模作为理论基础，构建总线矩阵，划分并定义主题域（数据域）、业务活动、业务对象、原子指标、业务限定、时间周期和派生指标。本文为您介绍在本教程中如何进行规范定义。基本概念 业务实体：业务对象 业务对象是...
配置管理 数据保护 敏感数据管理 DMS的敏感数据保护能力能根据所选的敏感数据扫描模板、敏感数据识别模型以及脱敏算法对数据进行脱敏处理，以避免敏感数据滥用，有效保护企业的敏感数据资产，防止数据泄露造成企业经营资金损失或罚款。...
您可以使用GeoJSON行政区划边界提取小工具 DataV.GeoAtlas，获取区域边界的地理数据信息，最低层级为区县级。坐标拾取器—高德地图 您可以通过高德地图的坐标拾取器，将详细地址转换为精准的基于 的坐标。例如，在搜索框中输入 西溪湿地，...
您可以使用GeoJSON行政区划边界提取小工具 DataV.GeoAtlas，获取区域边界的地理数据信息，最低层级为区县级。坐标拾取器—高德地图 您可以通过高德地图的坐标拾取器，将详细地址转换为精准的基于 GCJ-02坐标系 的坐标。例如，在搜索框中...
字段映射 系统自动提取日志服务中最近10分钟的日志字段，同时自动映射对应的AnalyticDB MySQL数据表中的字段。左边文本框为日志字段名称，右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志...
使用场景 集成任务中来源表的核心字段为JSON类型，需要使用 get_json_object 函数提取关键字段信息后再同步到目标数据表。您可以为目标表创建一个自动数据探查任务，指定在该集成任务运行成功后触发探查，校验该核心字段的解析结果是否符合...
使用场景 集成任务中来源表的核心字段为JSON类型，需要使用 get_json_object 函数提取关键字段信息后再同步到目标数据表。您可以为目标表创建一个自动数据探查任务，指定在该集成任务运行成功后触发探查，校验该核心字段的解析结果是否符合...