基于Flink+ClickHouse构建实时游戏数据分析
在互联网、游戏行业中，常常需要对用户行为日志进行分析，通过数据挖掘，来更好地支持业务运营，比如用户轨迹，热力图，登录行为分析，实时业务大屏等。当业务数据量达到千亿规模时，常常导致分析不实时，平均响应时间长达10分钟，影响业务的正常运营和发展。 本实践介绍如何快速收集海量用户行为数据，实现秒级响应的实时用户行为分析，并通过实时流计算Flink/Blink、云数据库ClickHouse等技术进行深入挖掘和分析，得到用户特征和画像，实现个性化系统推荐服务。 通过云数据库ClickHouse替换原有Presto数仓，对比开源Presto性能提升20倍。 利用云数据库ClickHouse极致分析性能，千亿级数据分析从10分钟缩短到30秒。 云数据库ClickHouse批量写入效率高，支持业务高峰每小时230亿的用户数据写入。 云数据库ClickHouse开箱即用，免运维，全球多Region部署，快速支持新游戏开服。 Flink+ClickHouse+QuickBI
实例进入部署中状态：步骤8 部署成功后，状态更新为服务中，请复制并保存 kafka集群默认接入点信息。步骤9 部署成功后，创建实验需要的主题，Topic名称 user-behavior-topic 文档版本：20201224 23 基于 Flink+ClickHouse构建实时游戏数据分析 基础环境部署 步骤10 创建实验需要的消费组。步骤11 查看消费状态，消费信息为...
游戏数据运营融合分析
场景描述 1.游戏行业有结构化和非结构化数据融合分 析需求的客户。 2.游戏行业有数据实时分析需求的客户，无法 接受T+1延迟。 3.对数据成本有一定诉求的客户，希望物尽其 用尽量优化成本。 4.其他行业有类似需求的客户。 方案优势/解决问题 1.秒级实时分析：依托ADB计算密集型实例， 秒级监控DAU等数据，为广告投放效果提 供有力的在线决策支撑。 2.高效数据融合分析：打通结构化和非结构化 数据，支撑产品体验分析；广告买量投放效 果实时（分钟级）分析，渠道的评估更准确。 3.低成本：DLA融合冷数据分析+ADB存储密 集型温数据分析+ADB计算密集型热数据分 析，在满足各种分析场景需求的同时，有效 地降低的客户的总体使用成本。 4.学习成本低：DLA和ADB兼容标准SQL语 法，无需额外学习其他技术。 产品列表 专有网络VPC、负载均衡SLB、NAT网关、弹性公网IP 云服务器ECS、日志服务SLS、对象存储OSS 数据库RDSMySQL、数据传输服务DTS、数据管理DMS 分析型数据库MySQL版ADS 数据湖分析DLA、QuickBI
数据接入日志服务 步骤1 Logstore创建完成，立即接入数据。步骤2 本文生成的是 json模拟数据，选择 JSON-文本日志接入。步骤3 创建机器组，Logtail在 3.1章节已安装。（若未安装也可在控制台直接安装）文档版本：20210224 62 游戏数据运营融合分析 部署 ECS-SLS数据采集 步骤4 创建机器组，往往产生日志数据的 ECS服务器有...
函数计算实现弹性音视频处理系统
场景描述 本示例通过函数计算部署一个高弹性高可用的 音视频处理系统。尤其适合视频网站使用，每天 有大量的上传视频，需要及时转码处理以适配各 种终端及网络条件，要求短时间内准备大量的计 算资源进行大规模并行转码处理，同时希望基于 FFmpeg自建的转码服务能简单迁移。 解决问题 1.如何使用函数计算部署音视频处理系统。 2.如何进行系统的压测。 产品列表 函数计算服务 文件存储NAS 对象存储OSS 函数工作流FnF 日志服务SLS
文档版本：20201228（发布日期）21 Function Compute 实现弹性音视频处理系统 配置日志 步骤2 单击取消，暂不接入数据。4.3.配置日志大盘 步骤1 打开 Function Compute 管理控制台。步骤2 在概览页面，单击快速入口下的配置日志大盘。步骤3 在配置日志大盘页面，单击新建关联。步骤4 在自定义日志分析侧边页，完成以下配置...
自建ElasticSearch迁移阿里云
场景描述 以ElasticSearch为例，演示搭建模拟业务系统、 VPN网关和IPSecVPN隧道，介绍如何通过快照 的方式，将ElasticSearch索引数据安全备份到 阿里云OSS存储空间，以及介绍如何将备份在 OSS的快照仓库恢复到阿里云ElasticSearch实 例，进一步达到ElasticSearch迁移上云的目的。 解决的问题 自建ElasticSearch的云上/跨云备份需求。 自建ElasticSearch迁移到阿里云 ElasticSearch服务实例。 产品列表 VPC，ECS，VPN网关，OSS，阿里云ElasticSearch，云速搭CADT
echo"ElasticSearch服务器的私网 IP地址 elasticsearch">>/etc/hosts 步骤3 执行下面命令，将自动下载并解压 Logstash和一个样例配置文件，并启动 Logstash 工具，配置文件中将 Magento的接入日志/var/log/httpd/magento-access_log内容作 为输入，并输出到 ElasticSearch的索引 magento_access_logs中。cd~#wget ...
基于MaxCompute的大数据BI分析
场景描述 本文以电商行业为例，将业务数据和日志数据使用 MaxCompute做ETL之后，同步到ADB进行实时 分析，之后通过QuickBI进行快速可视化展示。 解决问题 1.互联网行业、电商、游戏行业等网站、App、 小程序应用内BI分析场景。 2.可扩展到各类网站BI分析场景使用。 产品列表 1.MaxCompute 2.分析型数据MySQL版 3.日志服务SLS 4.QuickBI 5.云服务器ECS 6.RDSMySQL版
文档版本：20211213 30 基于 MaxCompute的大数据 BI分析 日志数据采集 步骤3 单击确认，进入数据接入向导。步骤4 选择 Web Tracking功能。步骤5 按默认设置，依次确定创建（全部确定即可）。文档版本：20211213 31 基于 MaxCompute的大数据 BI分析 日志数据采集 4.3.Web Tracking配置 步骤1 将如何下载源码和脚本文件中下载...
混合云存储构建VMware虚拟化平台
场景描述 本文以混合云存储阵列SA2600系统为例，介绍如 何在混合云存储环境下部署VMware虚拟化平台， 以及混合云环境下虚拟机的部署、扩容、云备份等功 能演示。 解决问题 1.如何使用混合云存储部署VMware虚拟化平台。 2.存储阵列在混合云环境下的使用，比如虚拟机部 署、扩容、云备份等。 产品列表 1.混合云存储阵列 2.对象存储OSS
电源连接 SA2600/3600的电源采用1+1冗余设计，左右各有1个电源模块，连接时分别接入 一路220V交流电，以避免单点故障。2.2.存储扩展柜连接 SA2600/3600每个控制器各有2个SAS口，分别为SAS-1，SAS-2，如下图所示。文档版本：20191223 10 混合云存储构建VMware虚拟化平台 存储阵列系统初始化配置 存储扩展柜的每个控制器各有2...
云解析DNS
云解析DNS（Domain Name System，简称 DNS）是一种快速、安全、稳定、智能的互联网域名解析服务。产品能力涵盖公网权威域名解析、全局流量管理、公网递归域名解析，帮助企业在互联网域名解析管理、域名自动容灾调度和移动APP/IoT终端域名防劫持方面提升用户体验和降低运维难度。
全球数百台服务器支撑，带宽资源充足，保证用户接入稳定服务.终端解析服务更稳定.绕过运营商LocalDNS，避免域名劫持，保护用户隐私.有效防劫持，访问更安全.推荐搭配使用.防劫持：移动端解析（APP/IOT场景）.移动端HTTPDNS解析.帮助客户实现不同网络运营接入的用户，解析出不同的IP地址。同时，也可以为每个地址池开启健康...
来自：
云产品
通过私网访问云服务
使用PrivateLink就可以通过私网访问其他VPC提供的服务，无需创建NAT网关或EIP等公网出口，更好的保障安全性和网络质量。支持同账号和跨账号的VPC间私网访问。另外 私网调用阿里云OpenAPI也有两种可选方案
文档版本：20210325 6 通过私网访问云服务最佳实践 通过 VPC接入地址调用API 创建终端节点后，查看终端节点的域名或者 IP。支持以下三种方式的访问：终端节点 域名，可用区域名和 IP地址。实际终端节点域名和可用区域名都被解析到 IP地址的。目前的状态是等待连接，需要在终端节点服务端允许连接才可以正常通信。文档版本：...
钉钉音视频会议解决方案
钉钉音视频会议解决方案，打通通信录、语音、会议、消息及会场管理系统，提供一站式全场景会议的能力，有效提升客户办公协同效率。通过硬件终端+软件客户端+SDK/API+云服务，突破空间、网络限制，将原有只能在会议室对会议室或者只能纯软件线上会议扩展为全场景随时随地入会、全球覆盖的云会议服务。
基于钉钉原生的组织协作能力，融合阿里巴巴达摩院先进的音视频算法和网络加密技术，同时结合生态接入实现企业会议场景高效协同，多端互通的软硬一体解决方案.钉钉音视频会议解决方案.向阿里云提交方案详情咨询.售前技术专家对接，评估需求.基于业务场景，评估容量需求和配置规格建议.为您提供阿里云建议配置方案与套餐.根据...
来自：
解决方案
RAPIDS加速机器学习
场景描述 本方案适用于使用RAPIDS加速库+GPU 云服务器来对机器学习任务或者数据科学 任务进行加速的场景。相比CPU，利用 GPU+RAPIDS在某些场景下可以取得非常 明显的加速效果。 解决问题 1.搭建RAPIDS加速机器学习环境 2.使用容器服务Kubernetes版部署 RAPIDS环境 3.使用NAS存储计算数据 产品列表 容器服务Kubernetes版 GPU云服务器 文件存储NAS
本示例提供了一套基于 NVIDIA的 RAPIDS Demo代码及数据集修改的示例代 码，演示了在 GPU实例上使用 RAPIDS加速一个从 ETL到 ML Training端到 端任务的过程。其中，ETL时使用 RAPIDS的 cuDF，ML Training时使用 XGBoost。本文示例代码基于轻量级大数据框架 Dask运行，为一套单机运行的 代码。2 文档版本信息：20191209 ...
钉钉专属音视频会议解决方案
钉钉专属音视频会议解决方案，将钉钉音视频会议系统部署在企业内网，充分利用企业内网带宽，从而实现低延迟，更高清的会议效果。同时钉钉音视频会议支持SIP设备，电话设备入会，可以与客户存量会议系统实现融合通讯。
提交采购咨询.向阿里云提交采购意向，描述项目需求.在专属钉钉样板间环境，体验专属音视频效果.在阿里云平台下单购买专属钉钉音视频组件.由阿里云同学部署专属音视频集群.RDS MySQL读写分离.RDS MySQL读写离.RDS MySQL读写.RDS MySQL...专属音视频部署了 SIP 接入相关组件，可以通过 SIP 协议支持保利通/华为等音视频终端入会.
来自：
解决方案
一站式短视频制作播放解决方案
本方案是集音视频采集、特效编辑、高速上传、转码处理、媒资管理、智能推荐、分发加速、播放分析于一体的一站式解决方案，提供易用统一的接口和产品级UI交互，帮助客户解决短视频应用开发中成本高、周期长、不稳定的问题，客户节省开发成本的同时，可快速上线短视频模块，构建云+端+AI 的短视频平台。
为客户提供一站式短视频平台搭建方案，提供可快速接入的产品级 SDK，节省研发成本，缩短时间周期，快速构建 APP 短视频功能.快速接入、节约成本.1.录制环节支持多种拍摄方式（断点、回删、点击、长按），实时美颜美肌、实时滤镜、实时水印、实时混音变速多种录制功能，且支持对接第三方 AR 能力；\ 2.导入环节支持多视频、...
来自：
解决方案
全球加速 GA
阿里云全球加速GA（Global Accelerator）是一款覆盖全球的互联网加速服务，实现网络服务全球范围就近接入和跨地域部署。依托阿里云优质的全球网络大幅减少网络延迟、丢包，传输效率提升10+倍。在跨境加速/游戏加速/应用加速等场景中为用户构建一个高性能、高可靠、高安全、易部署的加速网络。
用户的流量通过访问接入点IP地址，或CNAME地址就近接入到阿里云网络，提供网络加速.传输协议优化.传输层协议优化，大幅提高网络传输的稳定性和性能，优化网络加速.全局智能选路.将用户访问流量路由到合适的应用所在终端节点，实现网络加速.智能调度网络传输流量，自动就近接入阿里云全球网络.网络质量优化.访问控制策略....
来自：
云产品
超低延时直播 RTS
超低延时直播是一款超低延时、高并发、低卡顿的视频直播产品，它将延时从标准视频直播降低至毫秒级别，且提供更强的抗丢包能力，适用于对网络延时要求高、互动性强的直播场景。
全球卓越的实时流媒体传输网络，流媒体大脑动态智能选路和Qos抗弱网能力，支持RTMP、RTP、SRT、QUIC等多种协议接入，服务普通直播、秒级低延时直播、互动直播多业务场景，多方位保证直播高传输质量.全球实时流媒体传输网络（GRTN）.RTMP推流，RTS播放.保持推流使用RTMP，阿里云GRTN网络将会把RTMP转换成RTS进行播放，即可...
来自：
云产品
- 产品推荐
- 这些文档可能帮助您