Alibaba Cloud Linux
Alibaba Cloud Linux 是阿里云打造的 Linux 服务器操作系统发行版。为云上应用程序提供 Linux 社区的增强功能，同时通过引入更完善的发行版质量体系，确保产品品质，提供云上最佳用户体验。
我们将云原生机密计算 SIG 的技术和解决方案的沉淀做了整理汇总，挑选其中精华的内容形成了《云原生机密计算最佳实践白皮书》，为用户提供开箱即用的机密计算软件栈，降低机密计算的使用门槛,推动云原生场景下的机密计算技术的发展。2023-04-17eBPF 技术实践白皮书龙蜥社区在 eBPF 领域进行了广泛的实践。从底层的 eBPF 低...
来自：
云产品
基于Flink的资讯场景实时数仓
场景描述 本实践针对资讯聚合类业务场景，Step by Step介绍 如何搭建实时数仓。 解决问题 1.如何搭建实时数仓。 2.通过实时计算Flink实现实时ETL和数据流。 3.通过实时计算Flink实现实时数据分析。 4.通过实时计算Flink实现事件触发。 产品列表 实时计算 专有网络VPC 云数据库RDSMySQL版 分析型数据库MySQL版 消息队列Kafka 对象存储OSS NAT网关 DataV数据可视化
作业 SQL代码实现业务指标当天 Top 5 PV的热门类目的计算。CREATE TEMPORARY TABLE kafka_src_app_log_dwd(messageKey VARBINARY,`message` VARBINARY,topic VARCHAR,`partition` INT,`offset` BIGINT)WITH('connector'='kafka','topic'='app_log_dwd','properties.group.id'='consumer_group_kpi_4','properties.bootstrap...
函数计算实现弹性音视频处理系统
场景描述 本示例通过函数计算部署一个高弹性高可用的 音视频处理系统。尤其适合视频网站使用，每天 有大量的上传视频，需要及时转码处理以适配各 种终端及网络条件，要求短时间内准备大量的计 算资源进行大规模并行转码处理，同时希望基于 FFmpeg自建的转码服务能简单迁移。 解决问题 1.如何使用函数计算部署音视频处理系统。 2.如何进行系统的压测。 产品列表 函数计算服务 文件存储NAS 对象存储OSS 函数工作流FnF 日志服务SLS
尤其适合视频网站 使用，每天有大量的上传视频，需要及时转码处 理以适配各种终端及网络条件，要求短时间内准 备大量的计算资源进行大规模并行转码处理，同 时希望基于 FFmpeg自建的转码服务能简单迁 移。解决问题 1.如何使用 Function Compute 部署音视频 处理系统。2.如何进行系统的压测。产品列表 最佳实践频道 Function...
超级计算集群实现自然语言处理训练
场景描述 本方案适用于自然语言训练场景，使用神龙 GPU云服务器（SCCGN6）+CPFS进行NLP的 训练，采用Bert模型。这里不使用容器，直接 使用裸机进行NLP的Bert训练，使用飞天AI加 速训练工具可以有效提升多机多卡的训练效率。 解决问题 使用神龙GPU云服务器搭建NLP训练环 境 使用SCC的RDMA网络 使用CPFS存储训练数据 使用飞天AI加速训练工具加速训练 产品列表 神龙GPU云服务器（SCCGN6） SCC超级计算集群 CPFS共享存储
名词解释 GPU云服务器是基于GPU应用的计算服务，多适用于AI深度学习,视频处理，科 学计算，图形可视化，等应用场景，型号有AMDS7150，NvidiaM40，Nvidia P100，NvidiaP4，NvidiaV100。阿里云成为中国首家与NGCGPU加速容器合 作的云厂商。更多信息，详见GPU云服务器 https://cn.aliyun.com/product/ecs/gpu 。 AIACC是...
向量检索服务
向量检索服务基于阿里云自研的向量引擎 Proxima 内核，提供具备水平拓展、全托管、云原生的高效向量检索服务。向量检索服务将强大的向量管理、查询等能力，通过简洁易用的 SDK/API 接口透出，方便在大模型知识库搭建、多模态AI搜索等多种应用场景上集成。
条件过滤时，用预先定义的 Field 将会有更快的检索速度和更少的算力开销.支持多种表达式过滤.支持 6 种比较运算符、and 和 or 逻辑运算符以及 like 字符串运算符，满足向量+条件过滤组合查询.条件过滤查询.两路召回、综合排序.具备关键词检索、向量检索、关键词+向量混合检索的优势，且可大幅降低系统复杂度。数据统一、...
来自：
云产品
容器服务 Kubernetes 版 ACK
阿里云容器服务Kubernetes版ACK（容器服务Kubernetes版，简称ACK）支持企业级K8s容器化应用的全生命周期管理，提供高性能可伸缩的容器应用管理能力，助力企业高效运行云端K8s容器化应用。
—— 完美日记技术负责人常见问题方案规划资源计费集群开通Q：ACK 中使用容器运行应用的大致流程是什么？A：从开发代码到运行容器化应用，大致需要以下四个阶段：编写代码、使用 Dockerfile 构建镜像、上传镜像至镜像仓库、运行容器化应用。查看详情Q：ECS 服务器怎么选型？A：集群选择节点时，节点规格优先于节点数量。在...
来自：
云产品
SLS多云日志采集、处理及分析
场景描述 从第三方云平台或线下IDC服务器上采集 日志写入到阿里云日志服务，通过日志服务 进行数据分析，帮助提升运维、运营效率， 建立DT 时代海量日志处理能力。 针对未使用其他日志采集服务的用户，推荐 在他云或线下服务器安装logtail采集并使用 Https安全传输；针对已使用其他日志采集 工具并且已有日志服务需要继续服务的情 况，可以通过Log producer SDK写入日志 服务。 解决问题 1.第三方云平台或线下IDC客户需要使用 阿里云日志服务生态的用户。 2.第三方云平台或线下IDC服务器已有完 整日志采集、处理及分析的用户。 产品列表 E-MapReduce 专有网络VPC 云服务器ECS 日志服务LOG DCDN
云服务器 ECS（Elastic Compute Service）:是一种弹性可伸缩的计算服务，助您 降低 IT 成本，提升运维效率，使您更专注于核心业务创新。更多信息，请参见 ECS简介（https://www.aliyun.com/product/ecs）。文档版本：20211203 IV SLS多云日志采集、处理及分析 目录 目录 文档版本信息.I 法律声明.II 前言.III 目录.V 最佳...
应用实时监控服务ARMS
作为云原生可观测平台，应用实时监控服务 ARMS 包含前端监控、应用监控、云拨测等模块。覆盖浏览器、小程序、APP、分布式应用、容器等不同可观测环境与场景。帮助企业实现全栈性能监控与端到端追踪诊断。提高监控效率，压降运维工作量。
提供线程粒度 CPU 耗时及每类线程数量统计，及时发现集群 CPU 使用率过高或大量慢方法等问题.应用的 Pod 情况，包括 CPU、物理内存、网络流量、网络数据包等信息.Arthas 诊断.针对 Java 应用，利用字节码增强技术，不重启 JVM 进程情况下，查看应用运行情况.将被识别且接入的应用服务进行统一展示，列表页支持展示语言、...
来自：
云产品
本地数据中心基于SMB/NFS协议访问对象存储最佳实践
1. 云存储扩容和迁移 集成智能缓存算法，自动识别冷热数据，将热数据保留在本地缓存，保证数据访问体验，无感知的将海量云存储数据接入本地数据中心，拓展存储空间。同时在云端 保留全量数据(冷+热)保证数据的一致性 2.云容灾 随着云计算的普及，越来越多的用户把自己的业务放到了云上。但是随着业务的发展，如何提高业务的可靠性和连续性，跨云容灾是一个比较热门的话题。借助云存 储网关对虚拟化的全面支持，可以轻松应对各种第三方云厂商对接阿里云的数据容灾。 3. 多地数据共享和分发 通过多个异地部署的文件网关实例，对接同一个阿里云OSS Bucket，可以实现快速的异地文件共享和分发，非常适合多个分支机构之间互相同步和共享数据。 4. 适配传统应用 有很多用户在云上的业务是新老业务的结合，老业务是从数据中心迁移过来的使用的是标准的存储协议，例如: NFS/SMB/iSCSI。新的应用往往采用比较新的技 术，支持对象访问的协议。如何沟通两种业务之间的数据是一个比较麻烦的事情，云存储网关正好起到一个桥梁的作用，可以便捷的沟通新旧业务，进行数据交换。 5. 替代 ossfs 和 ossftp ossfs 和 ossftp 都是基于文件协议的开源工具，用户可以通过它们直接上传文件到OSS。但是这两个开源文件都不建议在生产环境使用(POSIX 兼容度低)，同时挂 载在用户的客户端需要额外的配置和缓存资源，对于多个客户端的情况安装配置繁琐。通过文件网关的服务可以完美替代 ossfs 和 ossftp。通过创建文件网关，用 户只需要执行简单的挂载(NFS)和映射(Windows SMB)就可以像使用本地文件系统一样使用 OSS。
通过裸金属服务器的模拟也说明 了只要第三方云厂商的计算也有二次虚拟化能力，同样可以使用本地云存储网关 服务，实现第三方云厂商对接阿里云的数据容灾。2.本地数据中心的云存储网关默认通过公网就可以访问阿里云对象存储 OSS，若专 线打通的情况下也可以通过内网访问 OSS获得更好的访问体验。当然专线打通的 情况下，建议...
利用交互式分析(Hologres)进行数据查询
场景描述：随着收集数据的方式不断丰富，企业信息化 程度越来越高，企业掌握的数据量呈TB、 PB或EB级别增长。同时，数据中台的快 速推进，使数据应用主要为数据支撑、用户 画像、实时圈人及广告精准投放等核心业务 服务。高可靠和低延时地数据服务成为企业 数字化转型的关键。 Hologres致力于低成本和高性能地大规模 计算型存储和强大的查询能力，为您提供海 量数据的实时数据仓库解决方案和实时交 互式查询服务。 解决问题 1.加速查询MaxCompute数据 2.快速搭建实时数据仓库 3.无缝对接主流BI工具 产品列表 MaxCompute Hologres 实时计算Flink 专有网络VPC DataWorks DataV
由于单台服务器的处理能力有限，海量数据的分析需要分布式的计算模型。分布式的 计算模型对数据分析人员要求较高且不易维护。数据分析人员不仅需要了解业务需求，同时还需要熟悉底层分布式计算模型。MaxCompute为您提供完善的数据导入方案 以及多种经典的分布式计算模型，您可以不必关心分布式计算和维护细节，便可轻松 ...
智能数据建设与治理Dataphin
Dataphin遵循阿里巴巴集团多年实战沉淀的大数据建设OneData体系（OneModel、OneID、OneService），集产品、技术、方法论于一体，一站式地为您提供集数据引入、规范定义、智能建模研发、数据萃取、数据资产管理、数据服务等的全链路智能数据构建及管理服务。助您打造属于自己的标准统一、资产化、服务化和闭环自优化的智能数据体系，驱动创新。
数据中台大幅度降低了数据运营成本与决策时间成本，提高了速度和准确性.集成超过50个数据源涉及的数据，地产、物业、营销、市场、IoT 等数据域上云.多源异构的数据上云.5人的数据团队,服务集团区域及总部职能人员超百人的数据需求.人力运营成本的管控.丰富的数据模型构建，洞察业务的过程数据，实现精细化运营.业务的精细化...
来自：
云产品
云服务器基准性能测试
本最佳实践适合利用标准的benchmark工具对云服务器的CPU、内存、网络和磁盘性能进行测试的场景。
最后用 time命令输出计算的时间，可以用时间的长短来衡量 CPU核心的计算能力，比如同样计算到 PI的小数点后 5000位，计算时间越短，说明 CPU核心的计算能力越强。多核心测试脚本：#vim superpi_multicore.sh#!bin/bash cpu_seqs=`cat/proc/cpuinfo|grep proce|sed-e"s/.*/g"|tr-s ' ' ' '` for cpu_seq in$cpu_seqs;do 文档...
GPU云服务器
阿里云GPU云服务器（GPU Cloud Computing，GPU）是提供 GPU 算力的弹性计算服务，具有超强的计算能力，服务于深度学习、科学计算、图形可视化、视频处理多种应用场景。阿里云作为亚洲第一的云服务提供商，随时为您提供触手可得的算力，有效缓解计算压力，提升您的业务效率，助您提高企业竞争力。
斯坦福Dawnbench Imagenet 训练速度最快，世界第一 斯坦福Dawnbench Imagenet 训练成本最低，世界第一.Tensorflow,Pytorch,MXNet和Caffe四种分布式训练框架.支持四种主流框架.适用于带宽密度的网络模型.性能提升50%至300%.支持FP16梯度压缩及混合精度压缩.单机多卡/多机多卡间高性能通信.支持insightface类型的数据+模型...
来自：
云产品
DataWorks
大数据开发治理平台 DataWorks基于MaxCompute/EMR/MC-Hologres等大数据计算引擎，为客户提供专业高效、安全可靠的一站式大数据开发与治理平台。每天阿里巴巴集团内部有数万名数据/算法工程师正在使用DataWorks，承担集团99%数据业务构建。
阿里云一体化大数据智能计算平台ODPS（Open Data Platform and Service）入选世界互联网领先科技成果，10余年来持续迭代，提供了实时离线一体、流批一体、湖仓一体、大数据+AI一体的多场景能力，是业界少有的完全自主研发，支持10万级服务器并行计算、百万级CPU可扩展大数据智能计算平台。DataWorks作为ODPS统一开发治理...
来自：
云产品
Cloud Toolkit阿里云开发者插件工具
Cloud Toolkit - 阿里云集开发、测试、诊断、部署为一体的免费本地多IDE插件，帮助开发者真正实现任意服务器或 ECS、EDAS、Kubernetes、SAE、函数计算等一键式研发部署，支持Java规约、高效执行终端命令和 SQL等常见工具，研发速度提升8倍以上，大幅降低研发成本。
云服务器 ECS（Elastic Compute Service）是一种弹性可伸缩的计算服务，助您降低 IT 成本，提升运维效率，使您更专注于核心业务创新。专业的售前技术支持，协助您选择最合适配置方案，.云服务器 ECS.企业级分布式应用服务 EDAS（Enterprise Distributed Application Service）是一个应用托管和微服务管理的 PaaS 平台，提供...
来自：
云产品
- 产品推荐
- 这些文档可能帮助您