AHAS多活容灾MSHA
多活容灾MSHA是在阿里电商业务环境演进出来的多活容灾商业化产品，是应用高可用服务AHAS的核心模块，为客户提供容灾架构建设能力。横向支持容灾架构的上线、运维、演练、切流，升级到下线。纵向支持业务流量的全链路管理，从流量接入到服务化调用再到异步化消息，最终完成数据落库。
提供对业务各层级组件资源的全自动化运维能力，大幅提升容灾运维效率.自动化多活运维.用户的业务应用部署在一个Region下多个可用区，对于可用区级的故障，基于SLB+DNS的入口切流方案，应用层残留东西向流量导致业务恢复慢；当应用或基础设施发生局部故障，业务恢复时间不可控.通过MSHA的RPC调用封闭能力，以及接入层、应用...
来自：
云产品
实时计算Flink版
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，具备实时应用的作业开发、数据调试、运行与监控、自动调优、智能诊断等全生命周期能力。内核引擎100%兼容Apache Flink，2倍性能提升，拥有FlinkCDC、动态CEP等企业级增值功能，内置丰富上下游连接器，助力企业构建高效、稳定和强大的实时数据应用。
一站式开发管理平台，包括SQL/Java/Scala/Python\\u00A0语言.支持主流\\u00A0Flink\\u00A0版本，包括多版本作业代码比较和回滚.内置统一元数据管理，并可无缝对接外部元数据系统.内置多个领域函数库，并可按需自定义函数.提供20多个Flink\\u00A0SQL常见通用场景的模版.支持线上采样和模拟测试数据管理.基于Session集群实现...
来自：
云产品
云原生数据湖分析DLA
阿里云云原生数据湖分析是新一代大数据解决方案，采取计算与存储完全分离的架构，支持对象存储(OSS)、RDS(MySQL等)、NoSQL(MongoDB等)数据源的消息实时归档建仓，提供Presto和Spark引擎，满足在线交互式查询、流处理、批处理、机器学习等诉求。内置大量优化+弹性，比开源自建集群最高降低50%+的成本，最快可1分钟级拉起300个计算节点，快速满足业务资源要求。
接入MySQL协议，可使用任何兼容MySQL协议的工具来进行数据分析，适合Adhoc查询、BI分析、轻量级ETL等数据分析场景.Spark引擎.Spark引擎是基于开源Spark打造的服务化的大数据分析与计算服务，兼容开源Spark语法、所有的API和多个版本，支持SQL语言和DataFrame代码。适合大量数据清洗，Streaming，编写Java、Scala、Python等...
来自：
云产品
企业构建统一CMDB数据源
典型场景 l 企业/ISV构建多云CMDB平台，对接数十款产品的API，拉取、清洗、格式化、存储配置数据是复杂且高成本的工作。 l 企业日常的资源管理，需依赖资源配置历史、资源关系数据进行故障溯源和影响评估。 解决方案 l 企业管理账号设置Config配置数据投递，将所有账号的资源配置快照和历史归集到统一地址留存。 l 使用OSS做长期归档，使用SLS做实时分析和监听。获取全量资源数据并及时感知云上资源的变更。 l 将数据集成到自有CMDB平台 客户价值 l 基于配置审计简单便捷的持续收集云上资源配置数据，在自建CMDB过程中节省大量人力和时间成本。 l 跨账号统一收集数据，实现中心化的资源配置管理。 l 实现资源配置数据的持续收集和监听，及时感知云上资源的增删改，洞察异常变更。
企业为多云部署，需要自建 CMDB平台（资源管理/本实践将指导企业客户在多账号的云上 IT 架 面向应用的运维管理）或向第三方成品软件上报云上 构下，一站式的采集全量资源配置数据、资源 的资源配置数据。配置历史、资源关系数据，将这些数据稳妥留 企业在内部日常运维中需依赖资源配置数据。如获取 存并快捷消费到自有的 ...
云上持续审计合规最佳实践
本方案是面向云上资源的操作审计和配置审 计，提供的最佳实践。适用于企业型客户。通过最佳实践帮助客户在本场景下更好的使用 阿里云，涉及到配置审计、操作审计、函数计算、SLS、OSS 等服务的实践操作。 解决问题 企业会面临外部对企业云上信息系统的合规要求，如等保2.0法规要求。 同时当云上资源达到一定规模时，在内部会制定合规管控的基线，满足自身管理效率和安全合规的需 求。 包括记录云上资源管理的操作日志、资源配置变更日志，还需依赖云平台提供的持续监控和自动告警能力，实现合规性的自主监管。
来使企业能够快速发现异常操作和配置错误，通过自动化方式或手 动方式快速应对，并且事后能够对过程完整追溯。全面可见的审计数据，以及近乎实 时的合规检测与修正，是实现上述目标的基础。在阿里云上，我们使用产品化的手段，通过事前的限制，事中的发现处理，以及事后 的审计追溯，来实现持续的运维风控。如上图所示，与...
DBS通过IPSec VPN备份自建数据库
场景描述 客户业务系统部署在IDC或者公有云环境，对业 务数据有云上备份需求。在客户交流过程中，基 于数据高可用和灾备需求，要求将数据备份至阿 里云OSS的存储空间，同时备份数据流基于 IPSecVPN/专线进行安全传输。 解决的问题 自建数据库的云上/跨云备份需求 DBS提供了完善的备份机制和API OSS的分层存储机制降低备份集储存成本 基于IPSecVPN/专线进行安全传输。 产品列表 VPC，ECS，DBS，VPN网关，OSS
DBS通过IPSec VPN备份自建数据库 场景描述 解决的问题 客户业务系统部署在 IDC或者公有云环境，对业 自建数据库的云上/跨云备份需求 务数据有云上备份需求。在客户交流过程中，基 DBS提供了完善的备份机制和 API 于数据高可用和灾备需求，要求将数据备份至阿 OSS的分层存储机制降低备份集储存成本 里云OSS的存储空间，同时...
混合云使用Ali-Perseus
场景描述 本文介绍了混合云场景中，自建 Kubernetes服务，线下集群+云上弹性扩 展阿里云GPU服务实例+飞天AI加速工 具，并采用阿里云CPFS存储，运行AI训 练+AI推理作业的操作步骤。 解决问题 1.利用云企业网打通两个地域的VPC， 自建Kubernetes集群 2.使用飞天AI加速工具运行训练和推理 作业 3.使用CPFS存储共享数据 产品列表 云企业网CEN GPU云服务器 并行文件存储CPFS 文件存储NAS
随着高性 能并行计算的大规模商业化，传统并行文件系统正面临诸多挑战，如存储资源 急剧增长、成本高、运维管理复杂度大、大规模存储系统的稳定性以及性能无 法随规模进行线性扩展等。阿里云 CPFS应运而生。更多信息，请参考阿里云 CPFS介绍：（https://help.aliyun.com/document_detail/111755.html）飞天 AI加速工具加速...
开源Flink迁移实时计算Flink全托管版最佳实践
本方案介绍如何将自建开源Flink集群的流式任务（包含Datastream、Table/SQL、PyFlink任务）迁移至阿里云实时计算全托管版。
Monitor模式下，自动调优运维页面会提供建议的资源配置，也可以通 过运维界面上的启用建议配置一键应用。相关的参数 parallelism.scale-down.interval、mem.scale-down.interval 等可以控 制调低资源的 间隔和行为。3.业务流量周期变化，启用 AutoPilot 实现自动扩缩容，降低资源使用成本。如果作业有明显的流量变化，能...
Function Compute构建高弹性大数据采集系统
当前互联网很多场景都存在需要将大量的数据信息采集起来然后传输到后端的各类系统服务中，对数据进行处理、分析，形成业务闭环。比如游戏行业中的游戏发行、游戏运营，产互行业中的数字营销，物联网、车联网行业中的硬件、车辆信息上报等等。这些场景普遍存在数据采集量大、数据传输需要稳定且吞吐量大的特点，给整个数据采集传输系统带来很大的挑战。在这个场景中，有三个关键的环节，数据采集、数据传输、数据处理。该最佳实践主要涉
步骤14 在第一章里，我们已经创建好了 dataCollector服务和 fun01函数，创建好函数后会自 动跳转到函数的详情页面，默认会在代码执行页面：步骤15 然后我们编写接收数据的 Python代码：#-*-coding:utf-8-*-import logging import json import urllib.parse HELLO_WORLD=b'Hello world!' def my_initializer(context):logger...
企业上云数据安全
场景描述 企业是否选择上公共云，或者哪些系统或数据上 公共云，对数据安全的关心是重要因素之一。本 最佳实践重点在于介绍狭义的数据加密存储安 全范畴，即首先使用SDDP产品进行敏感数据发 现和分级分类，然后对高级别敏感数据进行按 需、不同类型的全链路加密存储。 解决问题 1.帮助客户发现敏感数据 2.对敏感数据进行分类、分级 3.对不同级别的数据如何选择加密方式 4.具体如何进行加密 产品列表 敏感数据识别SDDP 密钥管理服务KMS 云数据库RDS 对象存储OSS
删除 python2的链接：cd/usr/bin/mv python python-bak 链接到 python3.7：ln-s/usr/local/bin/python3.7/usr/bin/python 步骤5 验证 python版本。python-V 文档版本：20210809 34 企业上云数据安全 OSS数据加密 如下所示为命令行执行过程的截图：安装 OSS的 SDK 因为我们使用的是 Python 3.x，执行以下命令，安装阿里云 ...
大数据近实时数据投递MaxCompute
本文介绍离线大数据场景使MaxCompute构建云 上近实时数仓，打通云下数据上云链路，解决数据复杂类型支持和动态分区问题，满足高级数据处理需求的最佳实践。 l混合云环境下，现有业务系统零改造，打通数据上云链路。 l使用UDF实现复杂数据类型转换和数据动态分区。 l使用DataWorks配置周期调度业务流程，数据自动入仓。 l借助MaxCompute优化计算引擎，实现降本增效。 产品列表 云服务器ECS 专有网络VPC 访问控制RAM 数据总线DataHub E-MapReduceEMR DataWorks 大数据计算服务MaxCompute
使用 DataWorks配置周期调度业务流程，数据自 产品列表 动入仓。借助 MaxCompute优化计算引擎，实现降本增 云服务器 ECS 效。云消息队列 Kafka 最佳实践频道 阿里云最佳实践分享群 E-MapReduce EMR DataWorks 大数据计算服务 MaxCompute 云速搭 CADT 文档模板（手册名称）/Error!Use the Home tab to apply 云服务器 ECS...
云Clickhouse冷热数据分层存储
基于云ClickHouse可以给电商、游戏、互联网以及其他行业提供高性能、高稳定性、低维护成本、高性价比的实时数据分析、精准营销、业务运营、业务分析、业务预警、业务营销、数仓加速等场景化方案，本实践会向客户提供数据库低维护成本、数据库链路构建、冷热分层存储、快熟分析等操作实践。 解决问题 1. 维护成本低不用建设维护体系，稳定性高，数据倾斜自动均衡。 2. 完善的数据同步链路，可以平滑将业务库、大数据、日志服务的数据同步到Clickhouse，降低研发成本。 3. 平滑升级版本，业务中断小。 冷热分层后透明读取，帮客户节约整体数据存储成本。
云 ClickHouse冷热数据分层存储最佳实践 技术架构 场景描述 基于云 ClickHouse可以给电商、游戏、互联网以及其他行业提供高性能、高稳定 性、低维护成本、高性价比的实时数据分 析、精准营销、业务运营、业务分析、业 务预警、业务营销、数仓加速等场景化方 案，本实践会向客户提供数据库低维护成 本、数据库链路构建、冷热...
基于DataWorks的大数据一站式开发及数据治理
概述 基于Dataworks做大数据一站式开发，包含数据实时采集到kafka通过实时计算对数据进行ETL写入HDFS，使用Hive进行数据分析。通过Dataworks进行数据治理，数据地图查看数据信息和血缘关系，数据质量监控异常和报警。 适用场景 日志采集、处理及分析 日志使用Flink实时写入HDFS 日志数据实时ETL 日志HIVE分析 基于dataworks一站式开发 数据治理 方案优势 大数据一站式开发，完善的数据治理能力。 性能优越：高吞吐，高扩展性。 安全稳定：Exactly-Once，故障自动恢复，资源隔离。 简单易用：SQL语言，在线开发，全面支持UDX。 功能强大：支持SQL进行实时及离线数据清洗、数据分析、数据同步、异构数据源计算等Data Lake相关功能 ，以及各种流式及静态数据源关联查询。
简单易用：SQL语言，在线开发，全面支持 UDX。功能强大：支持 SQL进行实时及离线数据清洗、数据分析、数据同步、异构数据 源计算等 Data Lake相关功能，以及各种流式及静态数据源关联查询。安全：原生的多租户系统，以项目进行隔离，所有计算任务在安全沙箱中运行。文档版本：20201020 2 基于 Dataworks的大数据一站式开发...
机场视频监控
场景描述 该最佳实践适用于国内机场的视频监控行业，将线下视频文件通过混合云阵列缓存后，通过专线上传到阿里云OSS上。 也适用于其他混合云场景中，利用阵列缓存文件，并通过网络传输到阿里云OSS上的场景。 解决问题 1.通过混合云阵列+专线将线下文件传到阿 里云OSS上 2.通过阿里云OSS跨区域复制功能实现异 地文件备份 3.通过OSS的自动生命周期管理功能实现 文件生命周期管理 产品列表 OSS对象存储 混合云阵列 高速通道（专线）
用API设置生命周期管理 本文以python语言为例，介绍如何使用API设置OSS的生命周期管理和跨区域复制功能。2.3.1.下载并安装OSS的python的SDK 打开如下页面，https://help.aliyun.com/document_detail/32026.html?spm=a2c4g.11186623.2.10.74415d26VukMyn#co ncept-32026-zh 58 企业上云实践 机场视频监控最佳实践 找到python...
E-HPC低成本实现量化策略回测
在量化交易场景下，量化策略的构建流程一般包括：想法、数据获取、建模、回测、结果分析等，在回测过程中往往需要海量的算力，进行大量数据的分析和处理，如何快速、高效和低成本的进行批量任务的调度，并快速获取结果是量化领域遇到的普遍挑战，这也是云计算能够带给客户的巨大优势。
由于量化策略一般依赖特定的三方库，库的小版本差别都会引起运行结果参数发生巨 大变化，因此需要借助容器化技术来标准化交付物，让任务屏蔽掉具体运行环境的影 响。综上所述，本实践将基于模拟的场景，结合 EHPC（弹性高性能计算）和容器化实现 低成量化策略回测。文档版本：20220321 2 E-HPC低成本实现量化策略回测 实验...
基于弹性计算的AI推理
场景描述 本方案适用于使用GPU进行AI在线推理的场 景。在推理之前，模型已经训练完成。例如,刷脸 支付中，我们在刷脸的时候，就是推理的一个过 程。再比如图像分类，目标检测，语音识别，语 义分析等返回结果的过程。 解决问题 使用GPU云服务器搭建推理环境 使用容器服务Kubernetes版构建推理 环境 使用NAS存储模型数据 使用飞天AI加速推理工具加速推理 产品列表 GPU云服务器 容器服务Kubernetes版 NAS共享存储
容器服务 Kubernetes版简化集群的搭建和扩容等运维工作，整合阿里云虚拟化、存储、网络和 安全能力，打造云端最佳的 Kubernetes容器化应用运行环境。阿里云容器服务是全球 首批通过 Kubernetes一致性认证的云平台服务，也是 Kubernetes认证服务供应商，可以为 您提供 专业的 容器支 持和服 务。更 多信息，请参见 ...
大数据workshop
大数据workshop
一站式提供数据采集、加工、分析、告警 可视化与投递功能，全面提升研发、运维、运营和安全等场景数字化能力。详见：https://www.aliyun.com/product/sls CADT：是一款为上云应用提供自助式云架构管理的产品，显著地降低应用云上 管理的难度和时间成本。本产品提供丰富的预制应用架构模板，同时也支持自 助拖拽方式定义应用...
来自：
最佳实践
相关产品：块存储,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,弹性公网IP,数据传输,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,实时计算,数据总线,Quick BI,Hologres
通过私网访问云服务
使用PrivateLink就可以通过私网访问其他VPC提供的服务，无需创建NAT网关或EIP等公网出口，更好的保障安全性和网络质量。支持同账号和跨账号的VPC间私网访问。另外 私网调用阿里云OpenAPI也有两种可选方案
帮助您构建更稳定、安全的应用，提升运维效率，降低 IT成本，使您更专注于核心业务创新。详见：https://www.aliyun.com/product/ecs 云解析 PrivateZone：云解析 PrivateZone，是基于阿里云专有网络 VPC（Virtual Private Cloud）环境的私有域名解析和管理服务。可以在自定义的一个或多个专 有网络中快速构建 DNS 系统，...
湖仓一体架构EMR元数据迁移DLF
通过EMR+DLF数据湖方案，可以为企业提供数据湖内的统一的元数据管理，统一的权限管理，支持多源数据入湖以及一站式数据探索的能力。本方案支持已有EMR集群元数据库使用RDS或内置MySQL数据库迁移DLF，通过统一的元数据管理，多种数据源入湖，搭建高效的数据湖解决方案。
用户可 以方便的对云上架构方案的成本、部署、运维、回收进行全生命周期的管理。详情：https://www.aliyun.com/product/developerservices/cadt RDS: 云数据库 RDS MySQL 版是全球最受欢迎的开源数据库之一，作为开源软 件组合 LAMP（Linux+Apache+MySQL+Perl/PHP/Python）中的重要一环，广泛应用于各类应用场景。...
金融专属大数据workshop
实践目标 学习搭建一个实时数据仓库，掌握数据采集、存储、计算、输出、展示等整个业务流程。 整个实时数据仓库系统全部基于阿里云产品进行架构搭建，用户可以掌握并学会运用各个服务组件及各个组件之间如何联动。 理解阿里云原生实时离线一体数仓解决方案架构以及掌握交付落地的实践使用方法。 前置知识要求 熟练掌握SQL语法 对大数据体系系统知识有一定的了解
一站式提供数据采集、加工、分析、告警可 视化与投递功能，全面提升研发、运维、运营和安全等场景数字化能力。详见：https://www.aliyun.com/product/sls CADT：是一款为上云应用提供自助式云架构管理的产品，显著地降低应用云上管 理的难度和时间成本。本产品提供丰富的预制应用架构模板，同时也支持自助拖 拽方式定义...
来自：
最佳实践
相关产品：块存储,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,弹性公网IP,数据传输,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,实时计算,数据总线,Quick BI,Hologres
- 产品推荐
- 这些文档可能帮助您