岭回归（Tikhonov regularization）算法是对不适定问题进行回归分析时，最常用的正则化方法。岭回归训练组件基于该算法，支持稀疏、稠密两种数据格式，且支持带权重样本的训练。本文为您介绍岭回归训练组件的配置方法。使用限制 支持的计算...
本文介绍纠删码的使用方法及使用中的常见问题。背景信息 纠删码（Erasure Coding，EC）是一种数据冗余存储机制。它能通过一定的算法将k个原始数据块计算出m个冗余数据块，只要在这 k+m 个数据块中选择任意k个数据块就能计算得到所有的原始...
Lindorm宽表引擎是一款分布式数据引擎，宽表引擎中的数据均按照主键进行分布。在执行查询时，如果表中存在多列主键，系统会从最左边的主键开始匹配。如果主键设置不当，则可能导致主键无法被有效利用，进而产生热点问题，影响查询性能。...
行业算法版简介 快速接入教程 OpenSearch-行业算法版 是基于阿里巴巴自主研发的大规模分布式搜索引擎搭建的一站式智能搜索业务开发平台，目前为包括淘宝、天猫在内的阿里集团核心业务提供搜索服务支持。通过内置各行业的查询语义理解、机器...
它可以说是分布式的，高效的，有以下优势：更快的训练效率 低内存使用 更高的准确率 支持并行化学习 可以处理大规模数据 与常见的机器学习算法对比，速度是非常快的。计算逻辑原理 LightGBM 通过叶分裂(Leaf-wise)策略来生长树。每次从当前...
功能简介 算法实例 通过配置算法实例，来分析光伏电站运维数据或设备运行数据，使您能及时监测和掌控光伏电站或设备的运行状态和故障情况。算法模板 物联网平台提供算法模板供您使用，您可以查看算法模板的详情信息，如：算法详细介绍、...
PolarDB-X优化器会基于代价估计将请求区分为TP与AP负载，其中AP查询会被进一步改写为分布式执行计划，发往只读实例进行计算，避免它对主实例的TP查询造成影响。MySQL生态兼容 PolarDB-X将兼容MySQL以及周边生态作为核心设计目标之一。本文...
网络资源是指用于节点之间通信和数据传输的硬件和软件资源，除了包括广域网、局域网、交换机、路由器，还包括常用到的专有网络、虚拟交换机、负载均衡、弹性公网、VPN、DNS、CDN等资源。在分布式系统中，网络资源的主要作用是支持节点之间...
如果您的应用遇到流量不均、单机故障、慢接口治理、业务流量统计、灰度发布监控等问题，可以通过应用监控的调用链分析快速定位问题代码。本文介绍如何通过调用链分析快速定位五种经典线上问题，更直观地了解调用链分析的用法与价值。背景...
数据压缩 HybridDB for MySQL事务引擎支持多种数据压缩算法，通过对数据块的压缩存储，大大节约了存储空间和I/O的开销，实测的压缩效果可以达到5倍。管理功能 HybridDB for MySQL事务引擎的管理功能包括备份、恢复、监控、报警、用户管理，...
行业算法版 智能 内置丰富的定制化算法模型，并结合不同行业搜索特点，推出行业召回、排序算法，保障更优搜索效果。灵活、可定制 开发者可基于自身业务特性与数据，定制相应的算法模型、应用结构、数据处理、查询分析、排序等配置，满足...
产品优势 开放与兼容 提供平台侧的API和SDK接口 兼容市面上所有的全景相机 算法能力 基于全景图像深度学习的空间结构预测 基于移动终端的自动化建模能力 基于全景图像的单目深度估计与融合算法 建模高效 平均100平米室内空间拍摄及制作时间...
基于稳定性支柱设计原则，整体稳定性设计方案可参考如下：架构设计原则 软件系统从所有的功能都在一个应用程序内运行的单体应用架构，到不同的功能模块分别部署在不同的服务器上的传统分布式应用架构，再到服务细分通过轻量级的通信机制...
cardinality estimation：根据查询表的分布情况，估计查询执行过程中的数据量、数据分布情况等。cost model：根据执行计划以及数据库内部的状态，计算按照各个执行计划执行所需要的代价。在查询优化器中，最为广泛研究的是查询计划中的join...
本文介绍了K均值聚类算法（K-Means Clustering Algorithm，以下简称K-Means）相关内容。简介 K-Means算法是一种迭代求解的聚类分析算法。该算法原理为：先将数据分为K组，随机选取K个对象作为初始的聚类中心，然后计算每个对象与各个种子聚...
游戏行业算法版介绍 游戏行业算法版基于最新算法功能，贴合游戏搜索场景的痛点和需求，提供了游戏行业专属的智能语义理解能力、向量召回、排序算法，为游戏行业的搜索性能和效果准确性提供双重保障，并有效的解决了超大词库数据导致的搜索...
针对一些常见高频的错误类型，此处提供一些错误处理建议供您参考。URL类错误码 此类错误码一般都是文件URL不符合要求，例如URL不安全、无效。更多信息，请参见 文件URL处理。图像加载错误码 此类错误也可以看作是图像URL错误，例如图像下载...
完成基本信息配置后，需要向AIRec传入行为/用户/物品数据，这是推荐算法运行过程必要的输入。本文主要介绍数据源的管理和数据接入环节常见问题的诊断方法。一、原始数据源配置 AIRec有两类数据源：启动数据源和实时数据源。启动数据源是在...
日志被广泛地应用在系统监控和故障定位中，传统的日志分析手段以分析日志风险等级和匹配关键字为主，例如监控Error级别日志的内容和数量、监控含有Failed、Unsuccessfully等关键词的日志。但是在分布式环境和微服务架构下，以传统的人工...
ACCL（Alibaba Collective Communication Library）是一款高性能通信库，提供了AllReduce、AllToAllV、Broadcast等常用集合操作接口以及点到点Send/Recv接口，为多机多卡训练提供高效的通信支持。本文为您介绍如何安装ACCL库。背景信息 ...
内容行业算法版介绍 内容行业算法版基于最新算法功能，贴合IT内容搜索场景的痛点和需求，提供了内容行业专属的智能语义理解能力、向量召回、排序算法，为内容行业的搜索性能和效果准确性提供双重保障，并有效的解决了超大词库数据导致的...
本文介绍如何快速上手并使用PAI及常用的AI开发流程，您可以结合实际情况选择。快速开始 您可以通过快速开始快速上手并体验PAI的训练和部署流程，详情请参见 快速开始概述。如果您想更详细地了解并使用PAI的子产品（Designer、DSW、DLC、EAS...
随着应用规模的扩大，系统变得越来越复杂，不可避免地会走向分布式化。各种中间组件会相继被引入系统，其中分布式消息服务更是系统中必不可少的一环。这些消息服务之前并没有在系统中实际经历过真实流量考验，其中某些隐患或缺陷很难被发现...
参数服务器PS（Parameter Server）致力于解决大规模的离线及在线训练任务，SMART（Scalable Multiple Additive Regression Tree）是GBDT（Gradient Boosting Decision Tree）基于PS实现的迭代算法。PS-SMART支持百亿样本及几十万特征的训练...
在进行分布式改造或应用上云后，分布式架构下的应用链路长、复杂度增加，并且云上应用的迭代速度比传统应用大幅提升，这些都给质量团队和运维团队带来了巨大的挑战。为了让用户能够用好云、上好云、SOFAStack 在提供优秀分布式架构、技术...
本文基于云原生数据库 PolarDB MySQL版，对常见DDL的操作进行了说明，方便用户查询和了解DDL的行为，评估DDL操作风险，降低对业务的影响。DDL操作说明 在MySQL生态中，DDL是一类非常复杂的操作，包括Index操作、Primary Key操作、Column...
产品简介 阿里巴巴通义实验室千寻搜索算法，基于达摩院长期积累的自然语言处理技术，专注企业统一搜索场景，提供精准的多源异构搜索，以PaaS服务形式提供离线数据处理和搜索服务API。同时支持公有云、专有云、基于云原生的基础架构下混合云...
算法不匹配 加密算法或认证算法或DH分组参数不匹配 HASH mismatched parsed INFORMATIONAL_V1 request packet lacks expected payload authentication failure 请排查IPsec连接及其对端网关设备在 IKE配置 阶段和 IPsec配置 阶段配置的 ...
DBSCAN（Density-Based Spatial Clustering of Applications with Noise）是一种基于密度的聚类算法。它将簇定义为密度相连的点的最大集合，把具有足够高密度的区域划分为簇，可以在噪声的空间数据集中发现任意形状的聚类。您可以使用...
7x24实时异常检测 DAS的7x24实时异常检测通过机器学习算法，实时对数据库的Workload进行异常检测，相比传统基于阈值的告警方式，能够更及时的发现数据库的异常，而不是靠故障驱动。您可以采集各种数据，比如从链路上采集数百个数据库性能...
而传统光伏运维基本上是通过人员巡检的方式发现问题，由此带来的不仅是人员成本的问题，还有故障不能及时被发现和解决隐患，进而导致电站长时间带故障运行，大大地降低了设备的寿命，也增加了设备折旧率，而影响到企业利润。因此，行业内...
本质是假设数据服从这个分布，然后使用极大似然估计做参数的估计。参数说明 IN端口 参数名 参数描述 是否必填 输入数据类型 数据源类型 特征变量 配置模型特征列 是 整数或浮点数 说明 若存在非数值数据，则会抛出异常。CSV组件。...
分布式锁是大型应用中最常见的功能之一，基于Redis实现分布式锁的方式有很多。本文先介绍并分析常见的分布式锁实现方式，之后结合阿里巴巴集团在使用 云原生内存数据库Tair 和分布式锁方面的业务经验，介绍使用 Tair 实现高性能分布式锁的...
本文介绍什么是 云原生数据库PolarDB分布式版，也称为 PolarDB分布式版，本手册中简称为 PolarDB-X。产品简介 PolarDB分布式版（PolarDB for Xscale，简称“PolarDB-X”）。PolarDB-X 是阿里云面向高吞吐、大存储、低延时、易扩展和超高...
本文介绍 AnalyticDB for MySQL 中的常用算子及算子所对应的属性。背景信息 AnalyticDB MySQL版 中的一个算子负责完成一个基本的数据处理逻辑，一组算子按照执行计划完成数据的一组处理规则。AnalyticDB MySQL版 是一个分布式系统，大多数...
评分卡是信用风险评估领域常用的建模工具，其原理是通过分箱输入将原始变量离散化后再使用线性模型（逻辑回归或线性回归等）进行模型训练，其中包含特征选择及分数转换等功能。同时也支持在训练过程中为变量添加约束条件。说明 如果未指定...
高性能检索版简介 OpenSearch-高性能检索版 是基于阿里巴巴自主研发的大规模分布式搜索引擎搭建的一站式智能搜索业务开发平台，在大数据场景下实现千亿数据毫秒级响应，提供订单、物流、保单等场景检索方案。OpenSearch-高性能检索版架构 ...
PyAlink脚本支持通过编写代码的方式来调用Alink的所有算法。您可以使用PyAlink脚本调用Alink的分类算法做分类、调用回归算法做回归、调用推荐算法做推荐等。PyAlink脚本也支持与其他Designer的算法组件无缝衔接，完成业务链路的搭建及效果...
参数服务器PS（Parameter Server）致力于解决大规模的离线及在线训练任务，SMART（Scalable Multiple Additive Regression Tree）是GBDT（Gradient Boosting Decision Tree）基于PS实现的迭代算法。PS-SMART支持百亿样本及几十万特征的训练...
即接即用 以API的形式对接，相关算法模型已经过大量训练和持续迭代优化，无需常见AI所依赖的前置海量打标样本训练，具备面向图、文、音、视模态中敏感与不宜内容的检测，并提供丰富的可解释性风险标签。使用方式灵活 支持以API方式灵活集成...