高可用及共享存储Web服务
随着业务规模的增长，数据请求和并发访问量增大、静态文件高频变更，企业需要搭建一个高可用和共享存储的网站架构，以确保网站服务能够7*24小时运行的同时，可保障数据一致性和共享性，并降低数据重复存储的成本。
资源共享一个NAS文件系统可以同时挂载到多个计算节点上，共享文件持久化在NAS上，不同ECS上可共享读/写NAS中的文件。用户和终端也可以通过ECS访问到NAS共享路径中的文件。应用场景电商平台确保用户在购物、下订单、支付等操作时无论何时都能访问，并提供持续可用的服务。同时，服务还负责对订单、库存等重要数据进行共享...
来自：
解决方案
云速搭部署 ALB 实现负载分发
本实践通过云速搭构建一个基于 http(s)的负载均衡业务架构，实现终端浏览器发起http(s)请求后，经过 ALB 监听配置的转发规则，分别负载分担到后端 ECS 服务器、CLB 和 ACK 集群。
版本编号 日期 作者 审核人 说明 V1.0 2021-10-28 洁谦 创建 最佳实践频道 阿里云最佳实践分享群 文档版本：20211028 I 云速搭部署 ALB实现负载分发 目录 目录 文档版本信息.I 法律声明.II 目录.1 前置条件.2 产品介绍.3 云速搭部署 ALB架构设计.4 1.前序工作.5 1.1.理解资源级别.5 1.2.资源规划清单.5 2.通过云速搭 CADT...
实时数仓Hologres
Hologres（原交互式分析）是一站式实时数据仓库引擎，支持海量数据实时写入、实时更新、实时分析，支持标准SQL（兼容PostgreSQL协议），支持PB级数据多维分析（OLAP）与自助分析（Ad Hoc），支持高并发低延迟的在线数据服务（Serving），与MaxCompute、Flink、DataWorks深度融合，提供离在线一体化全栈数仓解决方案。
高性能主键点查(Serving).基于行存表的主键索引和查询引擎的短路径优化，支持每秒数十万QPS高性能服务型点查，支持高吞吐更新，相比开源系统性能提升10倍以上.联邦查询，外表加速(Federation).无缝对接MaxCompute，无需数据移动，支持外表透明加速BI访问，支持冷热数据关联分析，支持百万级每秒数据高速同步，支持OSS外表...
来自：
云产品
FastGPU极速AI训练/推理
利用 FastGPU工具一键构建阿里云上的AI训练/推理环境，并使用AIACC加速工具进行加速。
步骤13 查看 GPU节点的私网 IP，并在 CPFS管理节点上使用 cpfs add 192.168.x.x添加节 点 IP。27 FastGPU极速 AI推理 运行 GTC Demo 步骤14 使用 mmlscluster可以查看节点已经添加成功。步骤15 使用 mmlsfs 03dd2792794bf67a-000001-T查看 CPFS默认路径（其中 03ddxxxxx 参考图示的内容获取）。步骤16 在 GPU服务器上使用 ...
湖仓一体架构EMR元数据迁移DLF
通过EMR+DLF数据湖方案，可以为企业提供数据湖内的统一的元数据管理，统一的权限管理，支持多源数据入湖以及一站式数据探索的能力。本方案支持已有EMR集群元数据库使用RDS或内置MySQL数据库迁移DLF，通过统一的元数据管理，多种数据源入湖，搭建高效的数据湖解决方案。
最佳实践频道 阿里云最佳实践分享群 产品列表 VPC、EMR、EIP、DLF、RDS、CADT 云服务器 ECS（产品名称）文档模板（手册名称）/文档版本信息 阿里云 湖仓一体架构 EMR元数据迁移DLF 最佳实践 文档版本：20220125 文档版本：20150122（发布日期）II 湖仓一体架构 EMR元数据迁移DLF 文档版本信息 文档版本信息 文本信息 属性 ...
S级游戏多地域批量开服
本实践将利用多地域模板创建应用，基于模板传参的方式，实现游戏全球多地域开服，并在这个过程中，详细介绍云管平台对接过程中所使用到CADT API以及使用方式。
3.支持 API集成到客户的资源管理流程 最 佳实践频道 阿里云最佳实践分享群 4.只需写一次代码，即可接入 100+阿里云产品的询价能力。5.只需写一次代码，即可接入 100+阿里云产品的开通能力。6.只需写一次代码，即可接入 100+阿里云产品的标签能力。7.支持库存校验以及 dryrun 接口，提前验证资源能否成功开 通。8.阿里云 ...
EMR集群安全认证和授权管理
场景描述 阿里云EMR服务Kafka和Hadoop安全集群使 用Kerberos进行用户安全认证，通过Apache Ranger服务进行访问授权管理。本最佳实践中以 Apache Web服务器日志为例，演示基于Kafka 和Hadoop的生态组件构建日志大数据仓库，并 介绍在整个数据流程中，如何通过Kerberos和 Ranger进行认证和授权的相关配置。 解决问题 1.创建基于Kerberos的EMR Kafka和 Hadoop集群。 2.EMR服务的Kafka和Hadoop集群中 Kerberos相关配置和使用方法。 3.Ranger中添加Kafka、HDFS、Hive和 Hbase服务和访问策略。 4.Flume中和Kafka、HDFS相关的安全配 置。 产品列表：E-MapReduce、专有网络VPC、云服务器ECS、云数据库RDS版
配置 Flume Agent 在 Gateway节点运行 Flume可以避免对 Kafka和 Hadoop集群负载产生较大的影响，本节通过 EMR控制台进行 Flume相关配置。步骤1 通过 EMR控制台访问网关集群的 Flume配置。文档版本：20200330 76 EMR集群安全认证和授权管理 EMR Hadoop安全集群和网关集群 步骤2 在服务配置 flume-conf可以看到默认配置，这些...
音视频终端 SDK
音视频终端 SDK集成了阿里云视频直播和视频点播业务中拍摄、编辑、上传、推流和播放的核心能力，同时融合视频特效、音频特效等音视频AI能力，为用户提供一体化SDK，支持多终端接入，搭配产品级Demo，支持用户根据业务需求快速集成所需
阿里云推流 SDK 是基于阿里云强大内容分发网络和音视频实时通讯技术的客户端推流开发工具，支持 Android、iOS、Flutter 多端多平台推流，为用户提供简单易用的开放接口、网络自适应的流畅体验、多节点的低延迟优化、功能强大的实时美颜等服务.推流 SDK.自定义 UI.提供完整的 UI 交互源码，用户可自定义 UI 界面或者默认 UI ...
来自：
云产品
云速搭部署ADB应用最佳实践
本实践通过云速搭实现一个云原生数据仓库AnalyticDB MySQL版的产品实例。
说明 V1.0 2021-11-15 衾影 创建 最佳实践频道 阿里云最佳实践分享群 文档版本：20211115 I 云速搭部署ADB应用 目录 目录 文档版本信息.I 法律声明.II 目录.1 前置条件.2 产品介绍.3 云速搭架构设计入门.4 1.前序工作.5 1.1.理解资源级别.5 1.2.资源规划.5 2.CADT设计部署服务.6 2.1.应用架构设计.6 2.2.配置资源参数.9 2.3...
RAPIDS加速图像搜索
场景描述 本方案适用于使用RAPIDS加速平台 +GPU云服务器来对图像搜索任务进行加 速的场景。相比CPU，利用GPU+ RAPIDS在图像搜索场景下可以取得非常 明显的加速效果。 解决问题 1.搭建RAPIDS加速图像搜索环境 2.使用容器服务Kubernetes版部署图 像搜索环境 3.使用NAS存储计算数据 产品列表 容器服务Kubernetes版 GPU云服务器 文件存储NAS
使用 NAS存储计算数据 产品列表 容器服务 Kubernetes版 GPU云服务器 文件存储 NAS 最佳实践频道 阿里云最佳实践分享群 如二维码 过期，请搜索群 号：31852400 云服务器 ECS（产品名称）文档模板（手册名称）/文档版本信息 阿里云智能 RAPIDS加速图像搜索 最佳实践 文档版本：20200114 文档版本：20150122（发布日期）II ...
云速搭部署ACK集群
通过云速搭实现 ACK 的部署
说明 V1.0 2022-01-10 七凌 创建 最佳实践频道 阿里云最佳实践分享群 文档版本：20220110 I 云速搭部署 ACK集群 目录 目录 文档版本信息.I 法律声明.II 目录.1 前置条件.2 产品介绍.3 云速搭架构设计.4 1.前序工作.6 1.1.理解资源级别.6 1.2.资源规划.6 1.3.部署说明.6 2.CADT部署 ACK应用架构.8 2.1.通过 CADT创建 ACK集群...
Spark on ECI大数据分析
场景描述 方案优势 1.计算引擎弹性扩缩容，兼顾资源弹性与计 算资源成本优化。 2.计算与存储分离架构，结合阿里云原生云 存储产品，海量数据湖优势。 3.Kubernetes原生的调度性能优势，提升在 大规模分析作业时的分析性能优势分。 4.集群资源隔离和按需分配。 解决问题 1.计算资源弹性能力不足，计算资源成本管 控能力欠缺. 2.集群资源调度能力和隔离能力不足。 3.计算与存储无法分离，大数据量分析时出 现数据存储资源瓶颈。 4.Spark submit方式提交分析作业参数支持 有限等缺点。 产品列表 容器服务Kubernetes版(ACK) 弹性容器实例(ECI) 文件存储HDFS 对象存储OSS 专有网络VPC 容器镜像服务ACR
160 文档版本 V1.1 版本日期 2020-04-09 文档状态 外部发布 制作人 衾影 审阅人 无 文档变更记录 版本编号 日期 作者 审核人 说明 V1.0 2020-03-31 明誉 无 创建 V1.1 2020-04-09 筱晖 明誉 文档工程师优化 最佳实践频道 阿里云最佳实践分享群 如二维码过期，请搜索群号：31852400 文档版本：20200409 I Spark on ECI大数据...
基于Elasticsearch的订单检索加速最佳实践
随着企业信息化程度越来越高，核心业务数据存储在传统关系型数据库中不可避免地会遇到一个问题：单表记录不断增多，数据检索速度会变慢，尤其是对中文的模糊查询（建立普通索引完全不起作用）。虽然数据库自身在不断完善，但效果有限且没办法灵活扩展，复杂场景无法应对。 本方案基于阿里云Elasticsearch作为二级索引库，数据集成产品提供Binlog实时订阅，实时解析、增量数据实时更新及二级索引库之间进行数据实时同步，为数据库提供“能力增益”， 不仅能从根本解决主库抗压问题，提升稳定性；同时支持高效率、高性能、高弹性、低成本、多复杂场景的检索加速服务。
配置项 说明 地域和可用 中国 华东 1（杭州）杭州可用区 H 区 可用区数量 单可用区 实例规格 节点类型 数据节点 Kibana 节 专有主节 点 点 数据节点规格族 云盘型 1:4通用型 1:2计算型 1:4通用型 规格说明 4核 16G 1核 2G 2核 8G 数据节点存储类型 ESSD云盘 ESSD云盘 单节点存储空间 2048GiB 20GiB 数据节点数量 3 3 文档...
RAPIDS加速机器学习
场景描述 本方案适用于使用RAPIDS加速库+GPU 云服务器来对机器学习任务或者数据科学 任务进行加速的场景。相比CPU，利用 GPU+RAPIDS在某些场景下可以取得非常 明显的加速效果。 解决问题 1.搭建RAPIDS加速机器学习环境 2.使用容器服务Kubernetes版部署 RAPIDS环境 3.使用NAS存储计算数据 产品列表 容器服务Kubernetes版 GPU云服务器 文件存储NAS
使用 NAS存储计算数据 最佳实践频道 阿里云最佳实践分享群 产品列表 容器服务 Kubernetes版 GPU云服务器 文件存储 NAS 如二维码过期，请搜索群号：31852400 云服务器 ECS（产品名称）文档模板（手册名称）/文档版本信息 阿里云智能 RAPIDS加速机器学习 最佳实践 文档版本：20200114 文档版本：20150122（发布日期）II ...
自建ELK迁移阿里云日志服务
场景描述 ELK Stack（Elastic/Logstash/Kibana） 通常 被用于日志实时分析， 在开源社区中有大量 的内容和使用案例。 本文介绍如何将自建的 ELK 系统迁移到阿里云 SLS 日志服务。 解决问题 1. 自建 ELK 如何迁移到阿里云日志服务。 2. 如何使用 Logtail 采集日志。 3. 如何使用阿里云日志服务对日志进行查 询、 分析。 产品列表 阿里云日志服务（SLS） VPN 网关 IPSec VPN 云服务器
步骤3 通过CADT画布获取nginx节点的公网地址，双击nginx节点 文档版本：20240422 14自建ELK迁移阿里云日志服务（SLS）搭建ELK环境 步骤4 使用浏览器访问nginx服务器的公网IP（刷新10次以上），产生10条访问日志 2.3.ELK环境验证 步骤1 浏览器输入http://{ELKECS的公网IP}:5601，首次打开请选择Exploreonmyown 进入Kibana...
MaxCompute湖仓一体方案
场景描述 自建数据湖与云数仓的融合解决方案，将 MaxCompute与自建的Hive集群做数据打 通，通过存储共享，元数据镜像等方式，解 决传统模式下的存储冗余，计算资源弹性能 力弱的痛点。可大幅度增强系统的资源弹 性，解决业务高峰期计算资源不足的问题。 方案优势 1.业务无侵入性：现有业务无需改造。 2.性能优化：MaxCompute在SQL上做 了大量优化与能力沉淀，可提高SQL 运行性能，降低计算成本。 3.灵活管理：元数据实时同步，无需额外 管理数据同步任务。 4.资源弹性：利用MaxCompute计算池 弹性进行海量数据计算。 解决问题 1.增强业务高峰期的资源弹性。 2.优化自建数据湖的数据治理能力。 3.减少跨平台数据处理的存储冗余。 产品列表 专有网络VPC 云服务器ECS 访问控制RAM 运维编排OOS MaxCompute（原ODPS） 云企业网CEN
更多信息，请参见：www.aliyun.com/product/odps HDFS：Hadoop分布式文件系统（HDFS）被设计成适合运行在通用硬件上的分 布式文件系统，它和现有的分布式文件系统有很多共同点。但同时，它和其他的分 布式文件系统的区别也是很明显的。HDFS 是一个高度容错性的系统，适合部署 在廉价的机器上。HDFS 能提供高吞吐量的数据...
基于k8s多集群隔离环境下的devops实现
场景描述 DevOps是一组过程、方法与系统 的统称，并通过工具实现自动化部署， 确保部署任务的可重复性、减少部署出 错的可能性。随着微服务、中台架构的 兴起，devops重要性日益显著。 本方案使用两个独立的k8s集群： 用户已有的k8s模拟测试，ack集群模 拟生产环境，保证环境的高度隔离，互 不影响。通过gitlab+Jenkins的黄金组 合，实现容器应用的自动化构建和持续 部署，提高迭代效率。 解决问题 1.微服务应用的CI/CD。 2.测试和生产环境的高度隔离。 3.自动化的测试与部署。 4.现有CI对接ACK。 产品列表 专有网络VPC 容器服务ACK 容器镜像服务ACR 弹性公网IP 负载均衡SLB
5.3.Pipeline脚本编写 Pipeline是一套运行于 Jenkins上的工作流框架，将原本独立运行于单个或者多个节 点的任务连接起来，实现单个任务难以完成的复杂流程编排与可视化。其作为 Jenkins2.X最核心的特性，帮助 Jenkins实现从 CI到 CD与 DevOps的转变。因此，pipeline脚本编写是整个方案实现的关键。5.3.1.脚本逻辑架构 本...
利用交互式分析(Hologres)进行数据查询
场景描述：随着收集数据的方式不断丰富，企业信息化 程度越来越高，企业掌握的数据量呈TB、 PB或EB级别增长。同时，数据中台的快 速推进，使数据应用主要为数据支撑、用户 画像、实时圈人及广告精准投放等核心业务 服务。高可靠和低延时地数据服务成为企业 数字化转型的关键。 Hologres致力于低成本和高性能地大规模 计算型存储和强大的查询能力，为您提供海 量数据的实时数据仓库解决方案和实时交 互式查询服务。 解决问题 1.加速查询MaxCompute数据 2.快速搭建实时数据仓库 3.无缝对接主流BI工具 产品列表 MaxCompute Hologres 实时计算Flink 专有网络VPC DataWorks DataV
Blink独享集群（原产品线）：如果您已经购买阿里云实时计算Blink独享集群，可以考虑继续使用Blink独享集群（原产品线）产品。Blink共享集群（原产品线）：目前Blink共享集群已停止售卖，仅支持原有集群 的扩容缩容操作，不推荐您继续使用Blink共享集群（原产品线）产品。1.3.大数据计算服务MaxCompute 大数据计算服务...
基于MaxCompute的大数据BI分析
场景描述 本文以电商行业为例，将业务数据和日志数据使用 MaxCompute做ETL之后，同步到ADB进行实时 分析，之后通过QuickBI进行快速可视化展示。 解决问题 1.互联网行业、电商、游戏行业等网站、App、 小程序应用内BI分析场景。 2.可扩展到各类网站BI分析场景使用。 产品列表 1.MaxCompute 2.分析型数据MySQL版 3.日志服务SLS 4.QuickBI 5.云服务器ECS 6.RDSMySQL版
基于 MaxCompute的大数据 BI分析 最佳实践 场景描述 业务架构 本文以电商行业为例，将业务数据和日志数据使用 MaxCompute做 ETL之后，同步到 Hologres进行实时分 析，之后通过 Quick BI进行快速可视化展示。解决问题 1.互联网行业、电商、游戏行业等网站、App、小程 序应用内 BI分析场景。2.可扩展到各类网站 BI分析场景...
基于日志服务构建业务可观测性系统
现在已知的各种监控数据的工具，以及对应的监控系统有非常多的选择，比如ZABBIX，Prometheus，Skywalking等。但是这些系统都存在同样的一个问题，只覆盖了可观察性的一部分，举个简单的类比，大家在日常开车的过程中，会用到很多的辅助设备，仪表盘，行车记录仪，导航，倒车影像等等，这些设备都各自承载了一部分的功能，但是都存在着如下的问题： l 数据覆盖不完整 l 存在数据孤岛（无法关联协同） l 使用门槛高，不够人性化 核心价值 l 全覆盖，统一协议，支持各类平台。 l 数据关联，统一Schema，关联Metrics/Logs。 l 云原生，SaaS服务，拥抱云原生。 l 简单易用，自动化埋点，数十项易用功能。 智能化，异常诊断，根因分析。
阿里云最佳实践技术分享群 全覆盖，统一协议，支持各类平台。数据关联，统一 Schema，关联 Metrics/Logs。云原生，SaaS服务，拥抱云原生。简单易用，自动化埋点，数十项易用功能。智能化，异常诊断，根因分析。如二维码过期，产品列表 请搜索群号：31852400 专有网络 VPC 容器服务 ACK 云速搭 CADT 日志服务 SLS 基于日志...
- 产品推荐
- 这些文档可能帮助您