实时计算Flink版
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务，具备实时应用的作业开发、数据调试、运行与监控、自动调优、智能诊断等全生命周期能力。内核引擎100%兼容Apache Flink，2倍性能提升，拥有FlinkCDC、动态CEP等企业级增值功能，内置丰富上下游连接器，助力企业构建高效、稳定和强大的实时数据应用。
江铃汽车股份有限公司作为中国TOP 20汽车制造厂商、《财富》中国企业500强，在大数据建设方面选择与阿里云强强合作，通过阿里云实时计算平台为公司构建统一的实时计算中心，服务于车辆中心、智慧车队、实时大屏三大业务线的多个实时场景，实现了实时业务的秒级响应，并成功帮助业务部门提高决策效率.查看案例详情.畅捷通的...
来自：
云产品
大数据近实时数据投递MaxCompute
本文介绍离线大数据场景使MaxCompute构建云 上近实时数仓，打通云下数据上云链路，解决数据复杂类型支持和动态分区问题，满足高级数据处理需求的最佳实践。 l混合云环境下，现有业务系统零改造，打通数据上云链路。 l使用UDF实现复杂数据类型转换和数据动态分区。 l使用DataWorks配置周期调度业务流程，数据自动入仓。 l借助MaxCompute优化计算引擎，实现降本增效。 产品列表 云服务器ECS 专有网络VPC 访问控制RAM 数据总线DataHub E-MapReduceEMR DataWorks 大数据计算服务MaxCompute
上近实时数仓，打通云下数据上云链路，解决数据复 使用 UDF实现复杂数据类型转换和数据动态分 杂类型支持和动态分区问题，满足高级数据处理需求 区。的最佳实践。使用 DataWorks配置周期调度业务流程，数据自 产品列表 动入仓。借助 MaxCompute优化计算引擎，实现降本增 云服务器 ECS 效。云消息队列 Kafka 最佳实践频道 ...
基于Flink的资讯场景实时数仓
场景描述 本实践针对资讯聚合类业务场景，Step by Step介绍 如何搭建实时数仓。 解决问题 1.如何搭建实时数仓。 2.通过实时计算Flink实现实时ETL和数据流。 3.通过实时计算Flink实现实时数据分析。 4.通过实时计算Flink实现事件触发。 产品列表 实时计算 专有网络VPC 云数据库RDSMySQL版 分析型数据库MySQL版 消息队列Kafka 对象存储OSS NAT网关 DataV数据可视化
通过实时计算 Flink实现实时 ETL和数据流。DataV数据可视化 3.通过实时计算 Flink实现实时数据分析。4.通过实时计算 Flink实现事件触发。最佳实践频道 阿里云最佳实践分享群 云服务器 ECS（产品名称）文档模板（手册名称）/文档版本信息 阿里云 基于Flink的资讯场景实时数仓 最佳实践 文档版本：20220223（发布日期）文档...
云管对接实现已有节点加入ACK集群
企业内部伴随着业务量增加，对 ACK 集群扩容属于高频操作，部分企业有一些特殊的 要求，例如节点规格需要灵活指定，系统需要重新初始化从而符合企业内部规范等。 直接通过节点池扩容显得不够灵活，例如缺少库存校验等能力，扩容有可能失败，扩 容完成后需要手动修改节点的配置，自动化程度较低，增加了运维人员的负担。
云管对接实现已有节点加入 ACK集群 最佳实践 场景描述 企业内部伴随着业务量...文档版本：20221122 14 云管对接实现已有节点加入 ACK集群 通过 CADT API实现 ACK集群扩容 在生产环境中，可以通过实时获取 token信息，然后以传参的方式应用到 ECS中，实 现 ECS节点以手动添加的方式加入到已有节点池中。文档版本：20221122 15
开源Flink迁移实时计算Flink全托管版最佳实践
本方案介绍如何将自建开源Flink集群的流式任务（包含Datastream、Table/SQL、PyFlink任务）迁移至阿里云实时计算全托管版。
这样无须第三方系统介入，作业就 能自动的实 现资源的弹性扩缩容，有效降低资源的使用。(下图是一个典型场景)文档版本：20211222 46 开源 Flink迁移实时计算Flink全托管版 附录 另外，运行中的作业也会因为各种因素导致 failover，AutoPilot 针对一些可自愈 的 failvoer 也提供了根 因的检测和自动恢复手段。4.作业发生异常...
云速搭部署SLS实现日志采集处理分析
通过云速搭部署ECS+SLS，在ECS上安装logtail收集Nginx应用日志写入SLS。通过日志生成器模拟Nginx日志生成，并通过SLS进行日志分析。
专有网络由逻辑网络设备（如虚拟路由器，虚拟 交换机）组成，可以通过专线/VPN等连接方式与传统数据中心组成一个按需定 制 的 网 络 环 境，实 现 应 用 的 平 滑 迁 移 上 云。详 见：https://www.aliyun.com/product/vpc 云服务器 ECS：云服务器 ECS（Elastic Compute Service）是一种简单高效、处理能力可弹性伸缩的计算...
函数计算实现弹性音视频处理系统
场景描述 本示例通过函数计算部署一个高弹性高可用的 音视频处理系统。尤其适合视频网站使用，每天 有大量的上传视频，需要及时转码处理以适配各 种终端及网络条件，要求短时间内准备大量的计 算资源进行大规模并行转码处理，同时希望基于 FFmpeg自建的转码服务能简单迁移。 解决问题 1.如何使用函数计算部署音视频处理系统。 2.如何进行系统的压测。 产品列表 函数计算服务 文件存储NAS 对象存储OSS 函数工作流FnF 日志服务SLS
Function Compute 实现弹性音视频处理系统 最佳实践 架构图 场景描述 本示例通过 Function Compute 部署一个高弹 性高可用的音视频处理系统。尤其适合视频网站 使用，每天有大量的上传视频，需要及时转码处 理以适配各种终端及网络条件，要求短时间内准 备大量的计算资源进行大规模并行转码处理，同 时希望基于 FFmpeg自建...
中小企业基于SAG APP实现云上移动办公
1. 客户端一键接入上云，配置自动化 2. 城域内 Internet 就近接入，快速高效 3. 数据加密传输，满足安全性要求 4. 阿里云控制台统一配置管理
可以在自定义的一个或多个专有网络中快速构建 DNS 系 统，实 现 私 有 域 名 映 射 到 IP 资源地址。详见：https://www.aliyun.com/product/pvtz 文档版本：20211008 III 中小企业基于 SAG APP实现云上移动办公最佳实践 目录 目录 文档版本信息.I 法律声明.II 名词解释.III 目录.1 最佳实践概述.2 前置条件.3 1.环境构建.4 ...
超级计算集群实现自然语言处理训练
场景描述 本方案适用于自然语言训练场景，使用神龙 GPU云服务器（SCCGN6）+CPFS进行NLP的 训练，采用Bert模型。这里不使用容器，直接 使用裸机进行NLP的Bert训练，使用飞天AI加 速训练工具可以有效提升多机多卡的训练效率。 解决问题 使用神龙GPU云服务器搭建NLP训练环 境 使用SCC的RDMA网络 使用CPFS存储训练数据 使用飞天AI加速训练工具加速训练 产品列表 神龙GPU云服务器（SCCGN6） SCC超级计算集群 CPFS共享存储
III企业上云实践 超级计算集群实现自然语言处理训练 弹性裸金属服务器（神龙）（ECSBareMetalInstance）是一种可弹性伸缩的高 性能计算服务，计算性能与传统物理机无差别，具有安全物理隔离的特点，分钟 级的交付周期将提供给您实时的业务响应能力，助力您的核心业务飞速成长。更 多信息，请参见弹性裸金属服务器...
应用实时监控服务ARMS
作为云原生可观测平台，应用实时监控服务 ARMS 包含前端监控、应用监控、云拨测等模块。覆盖浏览器、小程序、APP、分布式应用、容器等不同可观测环境与场景。帮助企业实现全栈性能监控与端到端追踪诊断。提高监控效率，压降运维工作量。
为什么选择应用实时监控服务 ARMS？Web 应用、小程序、APP 应用性能监控.模拟多地域/多运营商真实用户进行网站/API 拨测.模拟真实百万并发流量进行容量规划、服务压测.性能测试PTS.Java 应用性能监控与链路追踪.面向 K8s 集群，基于 eBPF 的无侵入多语言应用性能监控.应用监控 eBPF 版.PHP、Node.js 等多语言应用性能监控与...
来自：
云产品
云速搭部署 ALB 实现负载分发
本实践通过云速搭构建一个基于 http(s)的负载均衡业务架构，实现终端浏览器发起http(s)请求后，经过 ALB 监听配置的转发规则，分别负载分担到后端 ECS 服务器、CLB 和 ACK 集群。
专有网络由逻辑网络设备（如虚拟路由器，虚拟 交换机）组成，可以通过专线/VPN等连接方式与传统数据中心组成一个按需定 制 的 网 络 环 境，实 现 应 用 的 平 滑 迁 移 上 云。详 见：https://www.aliyun.com/product/vpc 云服务器 ECS：云服务器 ECS（Elastic Compute Service）是一种简单高效、处理能力可弹性伸缩的计算...
E-HPC低成本实现量化策略回测
在量化交易场景下，量化策略的构建流程一般包括：想法、数据获取、建模、回测、结果分析等，在回测过程中往往需要海量的算力，进行大量数据的分析和处理，如何快速、高效和低成本的进行批量任务的调度，并快速获取结果是量化领域遇到的普遍挑战，这也是云计算能够带给客户的巨大优势。
通过简单的命令即可实 现运行环境、依赖包版本等标准化统一。步骤1 为计算节点绑定 EIP 步骤2 ssh远程 ECS计算节点 ssh root@EIP 步骤3 安装 Docker 文档版本：20220321 14 E-HPC低成本实现量化策略回测 操作步骤 yum install-y docker 步骤4 启动 docker服务 systemctl start docker 步骤5 查看 Docker版本信息，验证 ...
云速搭部署 EIP 实现共享带宽/流量包管理
本实践通过云速搭设计、部署一个“ECS+EIP+共享带宽”架构，多个 EIP 可以使用共享带宽的资源。
云速搭部署EIP实现共享带宽/流量包管理 文档版本信息 云速搭部署 EIP 实现共享带宽/流量包管理 最佳实践 文档版本：20211025（发布日期）云速搭部署EIP实现共享带宽/流量包管理 文档版本信息 文档版本信息 文本信息 属性 内容 文档名称 云速搭部署 EIP实现共享带宽/流量包管理 文档编号 251 文档版本 V1.0 版本日期 2021-10...
OpenAPI实现云主机闪电交付
闪电交付最佳实践使用Alibaba Cloud Linux 2 镜像来快速创建大量的ECS云主机，满足客户在处理热点事件时大量且紧急的算力需求。 本实践针对在短暂时间内需要快速交付大量ECS实例的场景。通过调用阿里云Open API实现快速的跨VPC部署大量ECS实例，满足用户对高弹性算力的需求，而且ECS启动的时间很短。对于社交媒体，在线教育等存在线上热点活动的用户，该方案可以提高客户的使用体验
OpenAPI实现云主机闪电交付 最佳实践 业务架构 场景描述 闪电交付最佳实践使用 Alibaba Cloud Linux 2 镜像来快速创建大量的 ECS云主机，满足客户 在处理热点事件时大量且紧急的算力需求。解决问题 快速创建大量的云服务器实例，满足客户对紧 急的算力需求。产品列表 云服务器 ECS Alibaba Cloud Linux 2 最佳实践频道 阿里...
基于k8s多集群隔离环境下的devops实现
场景描述 DevOps是一组过程、方法与系统 的统称，并通过工具实现自动化部署， 确保部署任务的可重复性、减少部署出 错的可能性。随着微服务、中台架构的 兴起，devops重要性日益显著。 本方案使用两个独立的k8s集群： 用户已有的k8s模拟测试，ack集群模 拟生产环境，保证环境的高度隔离，互 不影响。通过gitlab+Jenkins的黄金组 合，实现容器应用的自动化构建和持续 部署，提高迭代效率。 解决问题 1.微服务应用的CI/CD。 2.测试和生产环境的高度隔离。 3.自动化的测试与部署。 4.现有CI对接ACK。 产品列表 专有网络VPC 容器服务ACK 容器镜像服务ACR 弹性公网IP 负载均衡SLB
基于 K8S多集群隔离环境下的 DevOps实现 最佳实践 业务架构 场景描述 DevOps 是一组过程、方法与系统的统 称，并通过工具实现自动化部署，确保部署任 务的可重复性、减少部署出错的可能性。随着 微服务、中台架构的兴起，devops重要性日 益显著。本方案使用两个独立的 k8s集群：用户已 有的 k8s模拟测试，ack集群模拟生产...
利用交互式分析(Hologres)进行数据查询
场景描述：随着收集数据的方式不断丰富，企业信息化 程度越来越高，企业掌握的数据量呈TB、 PB或EB级别增长。同时，数据中台的快 速推进，使数据应用主要为数据支撑、用户 画像、实时圈人及广告精准投放等核心业务 服务。高可靠和低延时地数据服务成为企业 数字化转型的关键。 Hologres致力于低成本和高性能地大规模 计算型存储和强大的查询能力，为您提供海 量数据的实时数据仓库解决方案和实时交 互式查询服务。 解决问题 1.加速查询MaxCompute数据 2.快速搭建实时数据仓库 3.无缝对接主流BI工具 产品列表 MaxCompute Hologres 实时计算Flink 专有网络VPC DataWorks DataV
实时分析架构图 加速查询MaxCompute离线数据 写入业务数据至离线数据仓库MaxCompute，通过Hologres直接加速查询或导入数 据至Hologres查询，并对接BI分析工具，实现实时分析离线数据。典型应用场景如 下：实时查询MaxCompute离线数据。分析MaxCompute离线数据报表。输出MaxCompute离线数据的在线应用，例如RESTfulAPI...
大数据workshop
大数据workshop
作业 1.Hologres与 MaxCompute的底层存储相同，Hologres除了结合 Flink实现下 一代实时数仓，也可以实现离线实时一体分析，请结合本实践的内容设计并实 现离线实时一体分析。2.Hologres 与 MaxCompute 的底层存储相同，因此 Hologres 也可以结合 MaxCompute实现联邦计算，请结合本实践的内容设计并实现联邦计算。文档版本：...
来自：
最佳实践
相关产品：块存储,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,弹性公网IP,数据传输,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,实时计算,数据总线,Quick BI,Hologres
- 产品推荐
- 这些文档可能帮助您