基于Flink+ClickHouse构建实时游戏数据分析
在互联网、游戏行业中，常常需要对用户行为日志进行分析，通过数据挖掘，来更好地支持业务运营，比如用户轨迹，热力图，登录行为分析，实时业务大屏等。当业务数据量达到千亿规模时，常常导致分析不实时，平均响应时间长达10分钟，影响业务的正常运营和发展。 本实践介绍如何快速收集海量用户行为数据，实现秒级响应的实时用户行为分析，并通过实时流计算Flink/Blink、云数据库ClickHouse等技术进行深入挖掘和分析，得到用户特征和画像，实现个性化系统推荐服务。 通过云数据库ClickHouse替换原有Presto数仓，对比开源Presto性能提升20倍。 利用云数据库ClickHouse极致分析性能，千亿级数据分析从10分钟缩短到30秒。 云数据库ClickHouse批量写入效率高，支持业务高峰每小时230亿的用户数据写入。 云数据库ClickHouse开箱即用，免运维，全球多Region部署，快速支持新游戏开服。 Flink+ClickHouse+QuickBI
关键技术选型 1.1.ClickHouse vs Presto 面对海量的数据，我们如何进行数据库的选项，这里对比了开源的两种常见分析性数 据库。ClickHouse对数据采用有序存储的方式，其核心思想是充分利用了磁盘批量顺序读写 的性能要远远高于随机读写的特征，并且结合 LSM tree的设计进一步进行优化，使得 写性能达到最优（可达到 200MB/S...
自建K8S集群迁移ACK弹性裸金属集群
场景描述 在微服务化改造之后，企业在享受K8S带来应 用管理的便利的同时，存在硬件性能不足，本 地扩展性差，容器容灾难，K8S管理复杂等问 题。 解决问题 1.增强K8S扩展性：如何通过弹性裸金属服务 器的强劲硬件性能，实现云端资源急速扩 展，从容应对应用访问压力大的问题。 2.如何简化云端K8S运维：通过阿里云容器服 务（ACK）实现敏捷开发和部署落地，加速 企业业务迭代。 3.如何综合考虑迁移和容灾：如何整合云上和 云下容器资源实现遇到故障时可以通过健 康检查实现自动容灾。 4.如何不改应用上云：如何实现应用上云数据 库连接零修改。 5.数据库上云及回退：如何实现上云回退； 产品列表 ACK/ECS/SLB/NAT网关/弹性裸金属服务器/DTS/RDS MySQL
不改应用：应用通过域名访问数据库，云上环境通过 PrivateZone实现数据库域名 解析 RDS域名，实现应用上云数据库连接零修改。云上云下并行场景下，数据库层面通过 DTS同步链路实现双向同步，实现数据库 双活。文档版本：20220128 2 自建 K8S集群迁移 ACK弹性裸金属集群 前置条件 前置条件 在进行本文操作之前，您需要完成...
ACK集群神龙资源错峰利用
场景描述 使用ACK构建容器集群环境，神龙资源为 集群节点资源部署应用。在主业务低谷 期，通过将部分神龙节点从容器集群中移 除，更换镜像切换操作系统及应用环境， 使得这部分神龙实例资源服务于其他业 务。在主业务高峰期前将神龙资源重新加 入ACK集群。从而达到错峰利用神龙资源 的目的，以便充分利用神龙资源，降低资 源成本。 解决问题 1.基于ACK及神龙资源构建容器集群环 境，典型部署应用。 2.ACK内挂载NAS存储。 3.ACK集群神龙实例节点移除和重新加入 集群。 产品列表 弹性裸金属服务器EBM 容器服务ACK 专有网络VPC 弹性公网IPEIP 负载均衡SLB 云数据库RDS MySQL版 云数据库Redis版 文件存储NAS 访问控制RAM 日志服务SLS 云监控CloudMonitor 运维编排OOS
产品列表 弹性裸金属服务器 EBM 容器服务 ACK 专有网络 VPC 弹性公网 IP EIP 负载均衡 SLB 云数据库 RDS MySQL版 云数据库 Redis版 最佳实践频道 阿里云最佳实践分享群 文件存储 NAS 访问控制 RAM 日志服务 SLS 如二维码过期，云监控 CloudMonitor 请搜索群号：31852400 云速搭 CADT 云服务器 ECS（产品名称）文档模板...
基于SLS实现统一告警最佳实践
告警对于企业的开发运维，安全运维，业务运维有着至关重要的作用。然而很多企业在告警运维方面存在着重复建设、监控质量差、告警风暴、触达不人性化、无法闭环等问题。 针对企业在告警管理方面存在的痛点问题，SLS告警提供了一站式云上告警管理方案，具有弹性易用、稳定可靠、功能持续升级、成本更低、噪音更少等优势。企业可以将现有的监控方案系统无缝接入到SLS告警平台，实现在SLS上一站式管理告警。
web-mysql zabbix-agent#安装 mariadb数据库 yum install-y mariadb-server systemctl start mariadb.service systemctl enable mariadb.service#导入 Zabbix数据到 Mysql数据库 mysql-uroot-p Enter password:/空密码直接按回车键 文档版本：20211021 60 基于 SLS实现统一告警最佳实践 配置自定义告警#执行 SQL脚本 ...
MaxCompute湖仓一体方案
场景描述 自建数据湖与云数仓的融合解决方案，将 MaxCompute与自建的Hive集群做数据打 通，通过存储共享，元数据镜像等方式，解 决传统模式下的存储冗余，计算资源弹性能 力弱的痛点。可大幅度增强系统的资源弹 性，解决业务高峰期计算资源不足的问题。 方案优势 1.业务无侵入性：现有业务无需改造。 2.性能优化：MaxCompute在SQL上做 了大量优化与能力沉淀，可提高SQL 运行性能，降低计算成本。 3.灵活管理：元数据实时同步，无需额外 管理数据同步任务。 4.资源弹性：利用MaxCompute计算池 弹性进行海量数据计算。 解决问题 1.增强业务高峰期的资源弹性。 2.优化自建数据湖的数据治理能力。 3.减少跨平台数据处理的存储冗余。 产品列表 专有网络VPC 云服务器ECS 访问控制RAM 运维编排OOS MaxCompute（原ODPS） 云企业网CEN
提供用户在云上 使用开源技术建设数据仓库、离线批处理、在线流式处理、即时查询、机器学习等 场 景 下 的 大 数 据 解 决 方 案。更 多 信 息，请 参 见：https://www.aliyun.com/product/emapreduce 文档版本：20220402 III MaxCompute湖仓一体方案 目录 目录 文档版本信息.I 法律声明.II 产品介绍.III 目录.IV 最佳实践...
CDH迁移升级CDP最佳实践
当前 CDH 免费版停止下载，终止服务，针对需要企业版服务能力并且CDH 升级过程对业务影响较小的客户，通过安装新的 CDP 集群，将现有数据拷贝至新集群，然后将新集群切换为生产集群，升级过程没有数据丢失风险，停机时间较短，适合大部分互联网客户升级使用。
CDH迁移升级 CDP 最佳实践 业务架构 场景描述 解决的问题 CDH升级至 CDP 当前 CDH免费版停止下载，终止服务，针对需要企业版 服务能力并且 CDH升级过程对业务影响较小的客户，通 要求升级过程无数据丢失风险 过安装新的 CDP集群，将现有数据拷贝至新集群，然后 要求升级宕机时间及短 将新集群切换为生产集群，升级过程没有...
EMR集群安全认证和授权管理
场景描述 阿里云EMR服务Kafka和Hadoop安全集群使 用Kerberos进行用户安全认证，通过Apache Ranger服务进行访问授权管理。本最佳实践中以 Apache Web服务器日志为例，演示基于Kafka 和Hadoop的生态组件构建日志大数据仓库，并 介绍在整个数据流程中，如何通过Kerberos和 Ranger进行认证和授权的相关配置。 解决问题 1.创建基于Kerberos的EMR Kafka和 Hadoop集群。 2.EMR服务的Kafka和Hadoop集群中 Kerberos相关配置和使用方法。 3.Ranger中添加Kafka、HDFS、Hive和 Hbase服务和访问策略。 4.Flume中和Kafka、HDFS相关的安全配 置。 产品列表：E-MapReduce、专有网络VPC、云服务器ECS、云数据库RDS版
产品列表：E-MapReduce、专有网络 VPC、云服务 最佳实践频道 阿里云最佳实践分享群 器 ECS、云数据库 RDS版 如二维码过期，请搜索群号：31852400 云服务器 ECS（产品名称）文档模板（手册名称）/文档版本信息 阿里云 EMR集群安全认证和授权管理 最佳实践 文档版本：20200330 文档版本：20150122（发布日期）II EMR集群安全...
电商网站业务安全
场景描述 业务运营活动是电商行业开展业务必不可少的 手段，但大流量带来的系统可用性、优惠券带来 的“薅羊毛”等问题屡见不鲜，都会影响到运营 效果、甚至出现负面影响。阿里云基于集团电商 业务多年的运营经验，为云上客户提供完整的电 商网站运营期间的防护方案。 解决问题 1.保障业务运维活动系统稳定运行 2.防止“薅羊毛” 3.运营优惠给到真实的客户 产品列表 爬虫风险管理 风险识别 DDoS防护包
基于阿里云分布式文件系统和 SSD盘高性能存储，RDS支 持 MySQL、SQL Server、PostgreSQL、PPAS和 MariaDB引擎，提供了容灾、备份、恢复、监控、迁移等方面的全套解决方案，彻底解决数据库运维的烦恼。Web应用防火墙：阿里云 Web应用防火墙基于云安全大数据能力，有效防御各类 OWASP常见 Web攻击并过滤海量恶意 CC攻击，避免...
云数据库 RDS 入门与试用
阿里云云数据库 RDS 为新手用户提供的免费体验的权益，有MySQL、PostgreSQL、SQL Server 固定规格和Serverless规格可选，为新手开发者提供 0 成本高质量的上云体验服务。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云AI 助理备案控制台云数据库 RDS云数据库 RDS云数据库 RDS MySQL 版云数据库 RDS PostgreSQL 版云数据库 RDS SQL Server 版云数据库 RDS MariaDB 版瑶池数据库产品概述产品功能选型与定价入门与试用技术解决方案相关资源控制台文档联系我们立即购买...
来自：
云产品
云数据库 RDS 技术解决方案
阿里云云数据库 RDS 提供成熟的上云解决方案，具备高可用、弹性稳定、高性价比等优势，助力企业IT架构平滑上云，降本增效。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云AI 助理备案控制台云数据库 RDS云数据库 RDS云数据库 RDS MySQL 版云数据库 RDS PostgreSQL 版云数据库 RDS SQL Server 版云数据库 RDS MariaDB 版 瑶池数据库产品概述产品功能选型与定价入门与试用技术解决方案相关资源控制台文档联系我们立即购买...
来自：
云产品
云数据库 RDS 产品功能
阿里云云数据库 RDS 具有稳定可靠、可弹性伸缩等性能特征。只需几次点击，即刻获得容灾、备份、恢复、监控、迁移等方面的全套解决方案，解决您数据库运维的烦恼。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云AI 助理备案控制台云数据库 RDS云数据库 RDS云数据库 RDS MySQL 版云数据库 RDS PostgreSQL 版云数据库 RDS SQL Server 版云数据库 RDS MariaDB 版瑶池数据库产品概述产品功能选型与定价入门与试用技术解决方案相关资源控制台文档联系我们立即购买...
来自：
云产品
云数据库 RDS 选型与定价
阿里云云数据库 RDS 提供包年包月、按量付费两种计费方式，并伴有节省计划和资源包（存储包、计算包）等形式，您可以根据自身需求灵活选择和组合使用。了解RDS MySQL定价策略，持续管控和优化成本。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云AI 助理备案控制台云数据库 RDS云数据库 RDS云数据库 RDS MySQL 版云数据库 RDS PostgreSQL 版云数据库 RDS SQL Server 版云数据库 RDS MariaDB 版瑶池数据库产品概述产品功能选型与定价入门与试用技术解决方案相关资源控制台文档联系我们立即购买...
来自：
云产品
云数据库 PolarDB 入门与试用
快速上手阿里云云原生数据库PolarDB，了解其强大性能和秒级弹性，立即开始免费试用PolarDB，享受业内领先的数据库解决方案，轻松管理和优化您的数据资源。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云AI 助理备案控制台云原生数据库 PolarDB云原生数据库 PolarDB云原生数据库 PolarDB MySQL 版云原生数据库 PolarDB PostgreSQL 版云原生数据库 PolarDB 分布式版瑶池数据库产品概述产品功能选型与定价入门与试用技术解决方案相关资源控制台文档联系...
来自：
云产品
云数据库 RDS 产品概述
阿里云云数据库RDS是一种安全稳定可靠、高性价比、可弹性伸缩的关系型数据库服务，支持包括 MySQL、PostgreSQL、SQL Server 等数据库引擎，拥有全套解决方案助力企业轻松数据库上云。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云AI 助理备案控制台云数据库 RDS云数据库 RDS云数据库 RDS MySQL 版云数据库 RDS PostgreSQL 版云数据库 RDS SQL Server 版云数据库 RDS MariaDB 版瑶池数据库产品概述产品功能选型与定价入门与试用技术解决方案相关资源控制台文档联系我们立即购买高...
来自：
云产品
云数据库 RDS 相关资源
阿里云云数据库 RDS 提供详细的产品文档，面相开发者提供全方位的API服务和SDK资源。有免费的实验课程和解决方案体验馆，帮助您快速上手 RDS。在阿里云瑶池数据库社区，您可以和更多开发者交流。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云AI 助理备案控制台云数据库 RDS云数据库 RDS云数据库 RDS MySQL 版云数据库 RDS PostgreSQL 版云数据库 RDS SQL Server 版云数据库 RDS MariaDB 版瑶池数据库产品概述产品功能选型与定价入门与试用技术解决方案相关资源控制台文档联系我们立即购买...
来自：
云产品
云数据库 PolarDB 技术解决方案
阿里云云原生数据库 PolarDB技术解决方案，帮助您快速了解如何利用这款高性能、可扩展的企业级数据库服务来提升业务效率，降低成本。
应用负载均衡ALB、Serverless应用引擎实例、云数据库PolarDB MySQL版Serverless集群都采用双可用区部署，当单可用区故障，可自动迁移使用另一可用区的服务。方案优势高效资源利用计算资源高可用由Serverless服务SLA保障。自动进行弹性伸缩，根据实时需求动态调整资源，适应不同的工作负载，实现高效资源利用。运维负担和...
来自：
云产品
云数据库RDS SQL Server版
阿里云SQL Server数据库已含微软License，支持复杂的SQL查询，性能优秀，对基于Windows平台.NET架构的应用程序具有完美的支持，广泛应用于新零售、医疗、房地产等行业。
云数据库RDS SQL Server 版发布快照备份功能，备份恢复效率数倍提升.云数据库RDS SQL Server 支持2019企业集群版版本发布.95A_活动与推广组件.RDS 新用户首次购买包年包月实例，全线规格首年低至6折起，配置越高，节省越多.95A_丰富的产品类型.营销2.0商品卡片（适用鸿蒙1.0）.营销2.0商品卡片.详情页售卖tab卡片.95A_产品...
来自：
云产品
- 产品推荐
- 这些文档可能帮助您