基于Flink+ClickHouse构建实时游戏数据分析
在互联网、游戏行业中，常常需要对用户行为日志进行分析，通过数据挖掘，来更好地支持业务运营，比如用户轨迹，热力图，登录行为分析，实时业务大屏等。当业务数据量达到千亿规模时，常常导致分析不实时，平均响应时间长达10分钟，影响业务的正常运营和发展。 本实践介绍如何快速收集海量用户行为数据，实现秒级响应的实时用户行为分析，并通过实时流计算Flink/Blink、云数据库ClickHouse等技术进行深入挖掘和分析，得到用户特征和画像，实现个性化系统推荐服务。 通过云数据库ClickHouse替换原有Presto数仓，对比开源Presto性能提升20倍。 利用云数据库ClickHouse极致分析性能，千亿级数据分析从10分钟缩短到30秒。 云数据库ClickHouse批量写入效率高，支持业务高峰每小时230亿的用户数据写入。 云数据库ClickHouse开箱即用，免运维，全球多Region部署，快速支持新游戏开服。 Flink+ClickHouse+QuickBI
文档版本：20201224 9 基于 Flink+ClickHouse构建实时游戏数据分析 基础环境部署 步骤4 以同样方式，拖拽 ECS、EIP至架构图中，如下图所示：步骤5 将 ECS和 EIP图标进行资源关联。单击创建连线，然后单击 EIP图标，按着鼠标不放，将连线的另一个端点，连接到 ECS 文档版本：20201224 10 基于 Flink+ClickHouse构建实时游戏...
自建ELK迁移阿里云日志服务
场景描述 ELK Stack（Elastic/Logstash/Kibana） 通常 被用于日志实时分析， 在开源社区中有大量 的内容和使用案例。 本文介绍如何将自建的 ELK 系统迁移到阿里云 SLS 日志服务。 解决问题 1. 自建 ELK 如何迁移到阿里云日志服务。 2. 如何使用 Logtail 采集日志。 3. 如何使用阿里云日志服务对日志进行查 询、 分析。 产品列表 阿里云日志服务（SLS） VPN 网关 IPSec VPN 云服务器
步骤3 模版中SLS日志服务配置了两个logstore，一个存储nginx日志，一个存储elk日志 文档版本：20240422 5自建ELK迁移阿里云日志服务（SLS）搭建ELK环境 步骤4 架构图中有两个ECS实例，实例名nginx用于模拟ECS自建nginx产生日志，实例 名elk用于模拟ECS自建ELK服务，具体ECS配置可以双击图标查看。步骤5 点击右上角的保存...
金融专属大数据workshop
实践目标 学习搭建一个实时数据仓库，掌握数据采集、存储、计算、输出、展示等整个业务流程。 整个实时数据仓库系统全部基于阿里云产品进行架构搭建，用户可以掌握并学会运用各个服务组件及各个组件之间如何联动。 理解阿里云原生实时离线一体数仓解决方案架构以及掌握交付落地的实践使用方法。 前置知识要求 熟练掌握SQL语法 对大数据体系系统知识有一定的了解
文档版本：20210803（发布日期）67阿里云最佳实践金融大数据WorkShop 最佳实践项目实践 步骤7 选择之前创建的数据源和表ads_sku_stat，单击添加数据集图标。步骤8 继续新建数据集（ads_province_info）。文档版本：20210803（发布日期）68阿里云最佳实践金融大数据WorkShop 最佳实践项目实践 3.4.2.2.配置区域仪表盘 步骤1 ...
来自：
最佳实践
相关产品：块存储,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,弹性公网IP,数据传输,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,实时计算,数据总线,Quick BI,Hologres
大数据workshop
大数据workshop
步骤3 在新建>官方模版库新建，输入“大数据 workshop”关键词搜索模板，单击基于 方案新建。文档版本：20210628（发布日期）10 阿里云最佳实践大数据 WorkShop 最佳实践项目实践 步骤4 配置模板资源参数并保存。ECS的规格以及 ECS的参数，如操作系统、登录密码等（注意 ECS密码必须 设置，目前模版已经预设了密码，因此不...
来自：
最佳实践
相关产品：块存储,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,弹性公网IP,数据传输,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,实时计算,数据总线,Quick BI,Hologres
DTS数据同步集成MaxCompute数仓
场景描述 本文Step by Step介绍了通过数据传输服务 DTS实现从云数据库RDS到MaxCompute的 数据同步集成，并介绍如何使用DTS和 MaxCompute数仓联合实现数据ETL幂等和数 据生命周期快速回溯。 解决问题 1.实现大数据实时同步集成。 2.实现数据ETL幂等。 3.实现数据生命周期快速回溯。 产品列表 MaxCompute 数据传输服务DTS DataWorks 云数据库RDS MySQL 版
文档版本：20220126（发布日期）5 DTS数据同步集成 MaxCompute数仓 资源环境部署 步骤3 通过搜索关键字找到“DTS数据同步集成 MaxCompute数仓”模版，单击基于应用新 建。步骤4 您可以双击图标修改资源参数，配置完成后，点击右上角的保存，设定应用名称后点 击确认。步骤5 应用保存成功后，点击部署应用。文档版本：...
- 产品推荐
- 这些文档可能帮助您