基于k8s多集群隔离环境下的devops实现
场景描述 DevOps是一组过程、方法与系统 的统称，并通过工具实现自动化部署， 确保部署任务的可重复性、减少部署出 错的可能性。随着微服务、中台架构的 兴起，devops重要性日益显著。 本方案使用两个独立的k8s集群： 用户已有的k8s模拟测试，ack集群模 拟生产环境，保证环境的高度隔离，互 不影响。通过gitlab+Jenkins的黄金组 合，实现容器应用的自动化构建和持续 部署，提高迭代效率。 解决问题 1.微服务应用的CI/CD。 2.测试和生产环境的高度隔离。 3.自动化的测试与部署。 4.现有CI对接ACK。 产品列表 专有网络VPC 容器服务ACK 容器镜像服务ACR 弹性公网IP 负载均衡SLB
通过 gitlab+Jenkins的黄金组合，实现容器应用的自动化构建和持续部署，提供了从源码编译、镜像构建、应用测试、生产上线的全流程示例。适用描述 微服务 CI/CD 自动化测试/部署 自有 k8s集群托管 方案架构 方案优势 全自动化构建、部署，提高部署效率，提高交付效率；应用容器化部署，做到一次构建、四处运行；多 k8s集群，...
云上日志集中审计
场景描述 云上的各类云产品和客户部署的业务系统会产生各类 日志，企业合规及安全运营等都需要在一个地方能 集中的查看和分析日志；目前各云产品日志大部分 都进了sls，但都是产品独立的project，不方便集中 审计；客户的业务系统日志各种形态都有；多云和混 合云的场景，日志也需要能集中审计。 解决问题 1.所有日志集中到SLS一个中心project下。 2.满足等保合规和内部合规需求。 3.满足运维和安全运营需求。 产品列表 日志服务SLS 专有网络VPC 弹性公网IPEIP 负载均衡SLB 云服务器ECS 云数据库RDS 云防火墙CFW
阿里云日志审计应用，是日志服务 LOG的一个新的重要模块，也叫“应用”，提供多 账户下跨多云产品审计相关日志进行实时自动化中心化采集，并提供审计需要的存储、文档版本：20200630（发布日期）2 云上日志集中审计 方案概述 查询、信息汇总支持。目前覆盖 ActionTrail、OSS、SLB、RDS、API网关等基础产品 并支持自由对接到...
游戏数据运营融合分析
场景描述 1.游戏行业有结构化和非结构化数据融合分 析需求的客户。 2.游戏行业有数据实时分析需求的客户，无法 接受T+1延迟。 3.对数据成本有一定诉求的客户，希望物尽其 用尽量优化成本。 4.其他行业有类似需求的客户。 方案优势/解决问题 1.秒级实时分析：依托ADB计算密集型实例， 秒级监控DAU等数据，为广告投放效果提 供有力的在线决策支撑。 2.高效数据融合分析：打通结构化和非结构化 数据，支撑产品体验分析；广告买量投放效 果实时（分钟级）分析，渠道的评估更准确。 3.低成本：DLA融合冷数据分析+ADB存储密 集型温数据分析+ADB计算密集型热数据分 析，在满足各种分析场景需求的同时，有效 地降低的客户的总体使用成本。 4.学习成本低：DLA和ADB兼容标准SQL语 法，无需额外学习其他技术。 产品列表 专有网络VPC、负载均衡SLB、NAT网关、弹性公网IP 云服务器ECS、日志服务SLS、对象存储OSS 数据库RDSMySQL、数据传输服务DTS、数据管理DMS 分析型数据库MySQL版ADS 数据湖分析DLA、QuickBI
ROS的编排引擎将根据模板自动完成所有资源的创 建和配置，实现自动化部署及运维。更多信息，请参见：help.aliyun.com/document_detail/28852.html EIP：弹性公网 IP（Elastic IP Address，简称 EIP），是可以独立购买和持有的 公网 IP地址资源。目前，EIP可绑定到专有网络类型的 ECS实例、专有网络类 型的私网 SLB实例、...
超级计算集群实现自然语言处理训练
场景描述 本方案适用于自然语言训练场景，使用神龙 GPU云服务器（SCCGN6）+CPFS进行NLP的 训练，采用Bert模型。这里不使用容器，直接 使用裸机进行NLP的Bert训练，使用飞天AI加 速训练工具可以有效提升多机多卡的训练效率。 解决问题 使用神龙GPU云服务器搭建NLP训练环 境 使用SCC的RDMA网络 使用CPFS存储训练数据 使用飞天AI加速训练工具加速训练 产品列表 神龙GPU云服务器（SCCGN6） SCC超级计算集群 CPFS共享存储
部署脚本.40 V企业上云实践 基于超级计算集群的自然语言处理AI训练 最佳实践概述 AI数据处理流程 AI数据处理一般分为三个步骤，数据采集，清洗标注，模型训练。本方案属于模型训 练阶段。方案场景描述 本最佳实践适用于自然语言处理的AI训练场景，尤其是对性能要求苛刻，业务交付紧 迫的场景。自然语言处理（NLP）就是在...
自建ElasticSearch迁移阿里云
场景描述 以ElasticSearch为例，演示搭建模拟业务系统、 VPN网关和IPSecVPN隧道，介绍如何通过快照 的方式，将ElasticSearch索引数据安全备份到 阿里云OSS存储空间，以及介绍如何将备份在 OSS的快照仓库恢复到阿里云ElasticSearch实 例，进一步达到ElasticSearch迁移上云的目的。 解决的问题 自建ElasticSearch的云上/跨云备份需求。 自建ElasticSearch迁移到阿里云 ElasticSearch服务实例。 产品列表 VPC，ECS，VPN网关，OSS，阿里云ElasticSearch，云速搭CADT
技术架构 本实践基于如下图所示的技术架构和主要流程。方案优势 安全性 基于 IPSec VPN/专线的方式进行数据安全传输 低成本 可以在 OSS Bucket设置对象的生命周期，分层存储节省存储的成本 ElasticSearch索引的快照机制 文档版本：20210802 1 自建 ElasticSearch快照备份 OSS 最佳实践概述 备份过程是“智能”的，第一个...
函数计算实现弹性音视频处理系统
场景描述 本示例通过函数计算部署一个高弹性高可用的 音视频处理系统。尤其适合视频网站使用，每天 有大量的上传视频，需要及时转码处理以适配各 种终端及网络条件，要求短时间内准备大量的计 算资源进行大规模并行转码处理，同时希望基于 FFmpeg自建的转码服务能简单迁移。 解决问题 1.如何使用函数计算部署音视频处理系统。 2.如何进行系统的压测。 产品列表 函数计算服务 文件存储NAS 对象存储OSS 函数工作流FnF 日志服务SLS
系统架构 如上图所示，当用户上传视频文件到 OSS指定目录下后，通过 Function Compute 的 OSS触发器自动触发 Function Compute 服务，Function Compute 调用函数工作流 的定制流程，自动处理音视频文件，这里是将 mov格式文件转换为 flv，mp4，mp3，avi格式的文件，并将转换后的文件存储到 OSS的指定目录。文档版本：...
数据库异地灾备
场景描述 适用于不满足于单地域，对数据可靠性 （RPO）和服务可用性（RTO）要求更高 的，希望防范断电、断网等机房故障，抵 御地震、台风等自然灾害，具备异地容灾 备份恢复能力的客户业务场景。 解决问题 1.实时备份，RPO达到秒级 2.表级恢复，故障恢复时间大大缩短 3.长期归档，自动管理备份生命周期 4.异地灾备，构建数据库灾备中心 产品列表 专有网络VPC 云服务器ECS 弹性公网IP（EIP） 负载均衡SLB 云数据库RDSMySQL 数据库备份服务DBS 对象存储服务OSS 数据湖分析服务DLA 数据管理服务DMS 数据传输服务DTS
传统方案是将备份集拷贝到本机其他盘、其他机器，这些都无法抵御地震、台风等自 然灾害；如果要做到异地容灾，需要用户在其他地区自行搭建备份机房，前期投入成 本很大。为了解决数据库异地灾备问题，阿里云 DBS提供多种环境的数据库备份服务，对于云 下 IDC数据库、其他云数据库、ECS自建数据库和 RDS数据库，可以将其数据...
传统企业业务上云基础安全防护
场景描述 越来越多的企业客户选择把自己的生产系统部 署在公共云平台上，以满足自身业务的发展及弹 性扩缩容、稳定性等方面的需求。如何在公共云 上构建基本的网络安全、主机安全、入侵检测、 运维审计等方案，是企业首选的最佳实践。 解决问题 1.服务器安全、应用安全 2.网络安全、数据安全 3.安全审计、安全管理 产品列表 云安全中心 Web应用防火墙 云防火墙 SSL证书 数据库审计 堡垒机
云安全中心：云安全中心是一个实时识别、分析、预警安全威胁的统一安全管理 系统，通过防勒索、防病毒、防篡改、合规检查等安全能力，帮助用户实现威胁 检测、响应、溯源的自动化安全运营闭环，保护云上资产和本地主机并满足监管 合规要求。 堡垒机：集中管理资产权限，全程记录操作数据，实时还原运维场景，助力企业 ...
RAM用户集成企业AD FS身份认证
介绍阿里云RAM集成Windows AD FS，使用企 业AD对员工的身份认证及管理功能，配置RAM 用户与AD用户的映射关系，实现企业员工使用企 业AD域账号以单点登录（SSO）的方式访问阿里 云控制台。 解决问题 1.Windows AD域部署。 2.Windows AD证书服务及Web服务部署。 3.Windows AD FS部署。 4.阿里云用户SSO配置。 5.AD FS集成RAM用户SSO。 产品列表 l访问控制RAM l专有网络VPC l云服务器ECS
文档编号 081 文档版本 V1.5 版本日期 2022/06/17 文档状态 外部发布 制作人 游士 审阅人-文档变更记录 版本编号 日期 作者 审核人 说明 V1.0 20190813 谈慧杰 子轩 创建 增加域别名、辅助 V1.1 20190820 谈慧杰-域名相关介绍 V1.2 20190828 筱晖-文档优化 V1.3 20200120 谈慧杰-增加概览页 更新CADT模版 V1.4 20211019 游...
Spring Cloud Netflix应用迁移EDAS
场景描述 Spring Cloud Netflix微服务应用迁移到EDAS 服务（SpringCloud Alibaba云版本）的方法， 迁移后充分利用阿里云监控、调用链、限流降级 等能力，优化应用生命周期管理。 解决问题 1.帮助自建SpringCloudNetflix微服务应用 通过简单修改迁移到阿里云企业级分布式 应用服务（EDAS）平台。 2.迁移到EDAS后，简化应用的运维，提升监 控、调用链探测、限流降级等管理能力，提 高对应用的全生命周期管理。 产品列表 企业级分布式应用服务（EDAS） 负载均衡（SLB） 专有网络（VPC） 云服务器（ECS）
文本信息 属性 内容 文档名称 Spring Cloud Netflix应用迁移 EDAS最佳实践 文档编号 149 文档版本 V1.1 版本日期 2020-01-06 文档状态-制作人 久诚 审阅人 游圣，敬海 文档变更记录 版本编号 日期 作者 审核人 说明 V1.0 2020-01-03 久诚 游圣，敬海 创建 V1.1 2020-01-06 筱晖-文档优化 文档版本：20200106 I Spring Cloud...
云原生大数据计算服务MaxCompute
阿里云云原生大数据计算服务MaxCompute是面向分析的企业级云数仓，作为一体化大数据智能计算平台ODPS的大规模批量计算引擎，MaxCompute以 Serverless 架构提供快速、全托管的在线数据仓库服务，使您经济高效的分析处理海量数据，进行敏捷的业务洞察。
基于阿里云 MaxCompute和DataWorks 构建了企业级数据仓库体系，底层数据存储方便、便宜、易拓展，计算效率高、反应快，并支持超大规模数据任务自动化管理。和阿里云的其他平台如 Quick BI良好的兼容打通，很方便的实现了数据应用一体化，减少了大量额外的开发成本和人力成本。平台一直和用户有良好沟通、反馈，不断优化改进...
来自：
云产品
RAPIDS加速机器学习
场景描述 本方案适用于使用RAPIDS加速库+GPU 云服务器来对机器学习任务或者数据科学 任务进行加速的场景。相比CPU，利用 GPU+RAPIDS在某些场景下可以取得非常 明显的加速效果。 解决问题 1.搭建RAPIDS加速机器学习环境 2.使用容器服务Kubernetes版部署 RAPIDS环境 3.使用NAS存储计算数据 产品列表 容器服务Kubernetes版 GPU云服务器 文件存储NAS
21 文档版本信息：20191209 RAPIDS加速机器学习 单 机部署 RAPIDS环境 5.单机部署 RAPIDS环境 5.1.1.下载镜像并启动 步骤1 下载 rapids加速库镜像，这里我们选择 rapidsai:0.8-cuda10.0-runtime-ubuntu16.04-gcc5-py3.6版本。注意：镜像大小为 7~8GB，根据网络情况的不同，下载时间不同。正常大概 10分钟 左右。root@rapids...
基于Flink的资讯场景实时数仓
场景描述 本实践针对资讯聚合类业务场景，Step by Step介绍 如何搭建实时数仓。 解决问题 1.如何搭建实时数仓。 2.通过实时计算Flink实现实时ETL和数据流。 3.通过实时计算Flink实现实时数据分析。 4.通过实时计算Flink实现事件触发。 产品列表 实时计算 专有网络VPC 云数据库RDSMySQL版 分析型数据库MySQL版 消息队列Kafka 对象存储OSS NAT网关 DataV数据可视化
文档版本：20220223（发布日期）89 基于 Flink的资讯场景实时数仓 业务系统 在浏览器中粘贴复制的链接，在线访问您的可视化应用。步骤5 大 屏 分 享 成 功 后，您 还 可 以 进 行 访 问 限 制 help.aliyun.com/document_detail/59273.html#section-czf-hcm-q2b 和发布快照 help.aliyun....
SLS多云日志采集、处理及分析
场景描述 从第三方云平台或线下IDC服务器上采集 日志写入到阿里云日志服务，通过日志服务 进行数据分析，帮助提升运维、运营效率， 建立DT 时代海量日志处理能力。 针对未使用其他日志采集服务的用户，推荐 在他云或线下服务器安装logtail采集并使用 Https安全传输；针对已使用其他日志采集 工具并且已有日志服务需要继续服务的情 况，可以通过Log producer SDK写入日志 服务。 解决问题 1.第三方云平台或线下IDC客户需要使用 阿里云日志服务生态的用户。 2.第三方云平台或线下IDC服务器已有完 整日志采集、处理及分析的用户。 产品列表 E-MapReduce 专有网络VPC 云服务器ECS 日志服务LOG DCDN
scp 您的日志发生器本机安装包保存路径 root@112.*.*.*:/root/本机执行 例如日志发生器本机安装包路径是/xx/nginx-log-generator-master.tar.gz，那么命 令为 scp/xx/nginx-log-generator-master.tar.gz root@112.*.*.*.*:/root tar zxvf nginx-log-generator-master.tar.gz 步骤3 启动日志发生器。文档版本：20211203 22 ...
- 产品推荐
- 这些文档可能帮助您