E-MapReduce Serverless StarRocks 版
E-MapReduce Serverless StarRocks版简称EMR StarRocks，是阿里云提供的全托管服务，内核100%兼容StarRocks，性能比传统OLAP引擎提升3-10倍，助力企业高效构建湖仓分析、高并发查询及实时分析等大数据应用。
针对企业的实时分析场景，EMR Serverless StarRocks 在实时摄入、实时数据建模、实时数据分析等方面效果显著，结合 Flink、Kafka 等，为企业打造实时分析链路，助力企业业务实时化.直接订阅 Kafka 的数据，提供 Flink-connector，flink 直接写入，exactly-one；适配 Flink-CDC 捕捉 TP 数据更新，实时更新 StarRocks.聚合表...
来自：
云产品
RDS MySQL迁移至PolarDB MySQL版
RDS MySQL的数据可在线实时同步到PolarDB MySQL版，并且升级切换后的PolarDB集群包含源RDS实例的账号信息、数据库、IP白名单和必要的参数。
一键部署手动部署方案权益优惠购买免费试用解决方案推荐RDS+ClickHouse构建一站式HTAP通过融合MySQL和ClickHouse的数据同步能力，用户可以在一个可视化窗口中简单灵活地配置和管理实时数据同步，这为业务报表统计、交互式运营分析和实时数仓构建提供了便利。在这个窗口中，用户可以轻松选择需要同步的表和字段，设置同步...
来自：
解决方案
数据库自动扩缩容和自动SQL优化
方案使用数据库自治服务DAS实现RDS MySQL数据库的自动扩缩容和自动SQL优化，将基于人工的手动式运维转变为基于智能的主动式持续优化，具有数据库运维成本低，服务稳定性高的优势。
方案部署方案权益优惠购买免费试用解决方案推荐RDS+ClickHouse构建一站式HTAP通过融合MySQL和ClickHouse的数据同步能力，用户可以在一个可视化窗口中简单灵活地配置和管理实时数据同步，这为业务报表统计、交互式运营分析和实时数仓构建提供了便利。在这个窗口中，用户可以轻松选择需要同步的表和字段，设置同步频率和条件...
来自：
解决方案
云上持续审计合规最佳实践
本方案是面向云上资源的操作审计和配置审 计，提供的最佳实践。适用于企业型客户。通过最佳实践帮助客户在本场景下更好的使用 阿里云，涉及到配置审计、操作审计、函数计算、SLS、OSS 等服务的实践操作。 解决问题 企业会面临外部对企业云上信息系统的合规要求，如等保2.0法规要求。 同时当云上资源达到一定规模时，在内部会制定合规管控的基线，满足自身管理效率和安全合规的需 求。 包括记录云上资源管理的操作日志、资源配置变更日志，还需依赖云平台提供的持续监控和自动告警能力，实现合规性的自主监管。
'-' 查询指定 AK的操作事件：*and event.userIdentity.accessKeyId:[AK]|SELECT"event.serviceName"as serviceName,"event.eventName"as eventName 查询有访问操作的 IP，以及 IP的操作事件统计 统计所有访问的 IP：*not event.sourceIpAddress:Internal|SELECT DISTINCT"event.sourceIpAddress"as ip 分析访问 IP的城市和...
SLS多云日志采集、处理及分析
场景描述 从第三方云平台或线下IDC服务器上采集 日志写入到阿里云日志服务，通过日志服务 进行数据分析，帮助提升运维、运营效率， 建立DT 时代海量日志处理能力。 针对未使用其他日志采集服务的用户，推荐 在他云或线下服务器安装logtail采集并使用 Https安全传输；针对已使用其他日志采集 工具并且已有日志服务需要继续服务的情 况，可以通过Log producer SDK写入日志 服务。 解决问题 1.第三方云平台或线下IDC客户需要使用 阿里云日志服务生态的用户。 2.第三方云平台或线下IDC服务器已有完 整日志采集、处理及分析的用户。 产品列表 E-MapReduce 专有网络VPC 云服务器ECS 日志服务LOG DCDN
文档版本：20211203 24 SLS多云日志采集、处理及分析 Logtail日志采集处理分析 注意：查询分析设置的修改操作只会对新写入的数据生效，如果您需要提前对查询分 析设置的某些字段分析统计生效，请使用指定字段查询的自定义方式在日志写入到日 志库之前进行开启统计查询。步骤4 再次启动日志发生器和停止日志发生器。按云...
基于Flink的资讯场景实时数仓
场景描述 本实践针对资讯聚合类业务场景，Step by Step介绍 如何搭建实时数仓。 解决问题 1.如何搭建实时数仓。 2.通过实时计算Flink实现实时ETL和数据流。 3.通过实时计算Flink实现实时数据分析。 4.通过实时计算Flink实现事件触发。 产品列表 实时计算 专有网络VPC 云数据库RDSMySQL版 分析型数据库MySQL版 消息队列Kafka 对象存储OSS NAT网关 DataV数据可视化
另一部分需要将数据写入 OLAP系统，经过多维分 析给业务方使用。5.数据挖掘：从历史中预测未来一直是人类的梦想，对公司来说，能对未来趋势作出 正确的判断才能基业长青。机器学习就是通过历史数据对未来进行预测的一种手 段，可以使数据发挥最大的作用。6.业务系统：经过处理的数据，可直接服务于相关业务方，如运营、决策...
云解析PrivateZone
云解析PrivateZone是基于阿里云专有网络VPC环境的内网域名解析和管理服务。能够在自定义的一个或多个VPC中快速构建DNS系统，实现不同VPC的完全数据隔离，更安全。
针对特定模块，既提供全局视角的整体统计分析，也支持根据特定终端 IP 地址、特定域名、特定时间窗口进行下钻过滤分析，同时也支持7天无解析量域名列表下载来辅助业务下线流程的顺利进行.多样化的分析维度.提供分钟级别的 DNS 解析请求量、DNS 解析时延、TOP 域名(Zone)列表、TOP 子域名列表、TOP 网络列表、TOP 客户端 IP ...
来自：
云产品
云上成本优化workshop
某金融科技公司，它主要提供信贷，理财，电商等 服务，目前已经拥有千万级注册用户。该公司在将 在线业务系统和大数据业务从自建 IDC 机房迁移 到阿里云后，今年大数据集群经历过多次因为资 源不足导致弹性扩容失败的故障，运维负责人非 常苦恼。由于该公司从事互联网金融的借贷业务， 白天的催收非常依赖晚上大数据计算的结果，若 因为资源不足导致计算结果失败则意味着白天催 收业务员无事可做，会对公司业务造成严重影响。 后来，通过阿里云解决方案架构师建议的方案，将 大数据集群迁移到资源较充足的可用区以及配置 弹性伸缩多规格 ECS 选型增加交付成功率等方 法，目前已阶段性的解决因资源不足导致弹性扩 容失败的问题，但该方案在 Spot 计算资源不足 时，启用大量按量收费算力，带来了较高的成本， 并且抢占式实例和按量付费实例都不保证资源 100%交付，还是存在交付失败的可能性，特别是 在双 11 期间由于其他客户的资源需求上升带来 的资源挤兑客观上存在，就进一步增加了弹性扩 容失败的风险，从而影响业务正常运行。
拟达到以下业务目标：清楚明了的成本分账，做好成本预算和控制 按照业务特征，选择合理的付费方式，降低整体云上成本 拥抱云原生，减少基础设施运维成本 在重要的时间点，做好资源预留，保障业务正常运行 文档版本：20210329 1 云上成本优化 workshop 架构设计 1.架构设计 1.1.业务应用 客户的业务系统，在微服务化改造之后...
来自：
最佳实践
相关产品：云服务器ECS,负载均衡 SLB,弹性公网IP,容器服务 ACK,日志服务（SLS）,NAT网关,函数计算,E-MapReduce,云数据库PolarDB,弹性容器实例 ECI,存储容量单位包,预留实例券,Hologres
新零售商超基于Serverless服务化改造
某零售商超行业龙头企业，主要业务涵盖购物中心、大卖场、综合超市、标准超市、精品超市、便利店、无人值守智慧商店等零售业态，涉及全渠道零售、仓储物流、餐饮、消费服务、数据服务、金融业务、跨境贸易等领域。为了持续支持业务高速且稳定地发展，其在快速上云后，将核心业务改造为全Serverless架构的中台模式，采用函数计算 + API网关 + 表格存储OTS 作为计算网络存储核心，弹性支撑日常和大促峰谷所需资源，轻松支撑618/双11/双12大促。 核心价值 l 全 Serverless 架构：FC + API 网关 + OTS Serverless 解决方案。 l 弹性高可用：毫秒级弹性扩容、充足的资源池水位、跨可用区高可用。 l 敏捷开发免运维：函数式极简编程可专注于业务创新，无采购和部署成本、提供监控报警等完备的可观测能力。
您只需在 Tablestore相应的表中 文档版本：20210519 23 新零售商超基于 Serverless服务化改造 架构环境搭建 直接创建多元索引，便可完成历史数据的多条件组合查询、模糊查询、地理位置查询、存在性查询、简单的统计聚合与分析等。3.4.搭建会员服务 3.4.1.下载代码 步骤5 代码下载地址：...
开源Flink迁移实时计算Flink全托管版最佳实践
本方案介绍如何将自建开源Flink集群的流式任务（包含Datastream、Table/SQL、PyFlink任务）迁移至阿里云实时计算全托管版。
作业迁移 原始集群计算说明：Flink 中的计算逻辑为：统计每 5分钟窗口内订单的订单总量和订单总金额。为便于介绍，以上计算逻辑在自建集群上分别使用三种 API(Datastream、Table/SQL、PyFlink)来实现。请先下载实现代码 https://github.com/RealtimeCompute/flink2vvp，说明如下:Datastream：参考 DataStreamJobKafka2Rds....
阿里云最佳实践容器workshop
通过本篇最佳实践，可以熟悉容器及k8s的基本操作。基于eci的高弹性架构，能有效的应对业务流量洪峰，同时提升资源使用效率。
步骤4 日志配置，通过 SLS日志服务来查看日志，并可以通过 sls来做统计、聚合等操作。日志库：access-error 容器内日志路径：/var/log/nginx/*.log 步骤5 配置完成，单击右上角的下一步。文档版本：20220301（发布日期）34 阿里云ACK容器服务workshop 阿里云 ACK实践 步骤6 高级配置部分的服务路由以及伸缩配置先不配置，...
游戏数据运营融合分析
场景描述 1.游戏行业有结构化和非结构化数据融合分 析需求的客户。 2.游戏行业有数据实时分析需求的客户，无法 接受T+1延迟。 3.对数据成本有一定诉求的客户，希望物尽其 用尽量优化成本。 4.其他行业有类似需求的客户。 方案优势/解决问题 1.秒级实时分析：依托ADB计算密集型实例， 秒级监控DAU等数据，为广告投放效果提 供有力的在线决策支撑。 2.高效数据融合分析：打通结构化和非结构化 数据，支撑产品体验分析；广告买量投放效 果实时（分钟级）分析，渠道的评估更准确。 3.低成本：DLA融合冷数据分析+ADB存储密 集型温数据分析+ADB计算密集型热数据分 析，在满足各种分析场景需求的同时，有效 地降低的客户的总体使用成本。 4.学习成本低：DLA和ADB兼容标准SQL语 法，无需额外学习其他技术。 产品列表 专有网络VPC、负载均衡SLB、NAT网关、弹性公网IP 云服务器ECS、日志服务SLS、对象存储OSS 数据库RDSMySQL、数据传输服务DTS、数据管理DMS 分析型数据库MySQL版ADS 数据湖分析DLA、QuickBI
对于需要频繁查询 的热数据，本阶段数据选型建议如下：文档版本：20210224 2 游戏数据运营融合分析 最佳实践概述 1)若统计分析的单表小于 500w，且数据库服务器空闲，在不影响业务的前 提下，可以直接在 RDS MySQL进行查询，这样整体成本最低。2)若单表数据大于 500w，或数据库服务器 CPU性能告急，或分析性能达不 到业务...
云数据库HBase
阿里云云数据库 HBase 版（ApsaraDB for HBase）是基于 Hadoop 且100%兼容HBase协议的高性能、可弹性伸缩、面向列的分布式数据库，轻松支持PB级大数据存储，满足千万级QPS高吞吐随机读写场景。
同时有一些即时数据分析需求.Spark可以直接分析HBase数据提供丰富的离线统计能力，HBase本身提供高吞吐低延迟的在线数据读写能力.离/在线一体化处理.支持结构化、半结构化的灵活schema，支持动态增加列，满足动态多变的游戏运营需求.支持结构化、半结构化.HBase支持冷热数据分离，降低冷数据的存储成本.云服务器 ECS.推荐...
来自：
云产品
微服务应用问题定位及故障演练
场景描述 用户微服务架构应用基于阿里云 ACK 部署， 通 过 ARMS 监控发现微服务应用的容错能力是否 健壮， 容器编排配置是否合理， 以及节点故障引 发的问题等， 方案通过 AHAS 故障注入模拟生 产环境产生的故障， 通过 ARMS 及时发现问题、 定位问题， 并结合 ARMS 的告警功能快速发现 并解决问题。 发现调用下游一个服务实例出现异常。 发现业务 Pod 故障， 验证业务的稳定性。 发现调用数据库延迟故障， 验证 Pod 的水 平扩容能力。 解决问题 1. 定位并解决微服务应用的容错能力。 2. 定位并解决微服务应用编排合理性。 3. 发现故障并验证系统故障的告警时效性。 产品列表 应用高可用服务 AHAS 性能测试 PTS 应用实时监控服务 ARMS 容器服务 kubernetes 版 负载均衡 SLB 专有网络 VPC 日志服务 SLS
步骤20 通过详细的统计分析我们也可以看到，是调用/notifications/settings/current这个接口 导致时间变长了，这样我们就可以进一步排查下游服务是否存在异常。文档版本：20220331 63 微服务应用问题定位及故障演练 问题定位及故障模拟 步骤21 为了提升应用的高可用，可以采取对下游应用进行隔离的方案（这个方案可以参考...
- 产品推荐
- 这些文档可能帮助您