基于Flink+ClickHouse构建实时游戏数据分析
在互联网、游戏行业中，常常需要对用户行为日志进行分析，通过数据挖掘，来更好地支持业务运营，比如用户轨迹，热力图，登录行为分析，实时业务大屏等。当业务数据量达到千亿规模时，常常导致分析不实时，平均响应时间长达10分钟，影响业务的正常运营和发展。 本实践介绍如何快速收集海量用户行为数据，实现秒级响应的实时用户行为分析，并通过实时流计算Flink/Blink、云数据库ClickHouse等技术进行深入挖掘和分析，得到用户特征和画像，实现个性化系统推荐服务。 通过云数据库ClickHouse替换原有Presto数仓，对比开源Presto性能提升20倍。 利用云数据库ClickHouse极致分析性能，千亿级数据分析从10分钟缩短到30秒。 云数据库ClickHouse批量写入效率高，支持业务高峰每小时230亿的用户数据写入。 云数据库ClickHouse开箱即用，免运维，全球多Region部署，快速支持新游戏开服。 Flink+ClickHouse+QuickBI
文档版本：20201224 28 基于 Flink+ClickHouse构建实时游戏数据分析 基础环境部署 步骤9 通过 DMS数据管理，登录云数据库 ClickHouse。步骤10 输入数据库账号和数据库密码，单击测试连接。文档版本：20201224 29 基于 Flink+ClickHouse构建实时游戏数据分析 基础环境部署 1.首次登录，按提示添加 IP网段到实例白名单中，...
智慧连锁O2O小程序解决方案
基于用AI、云计算、大数据等技术驱动零售企业数字化升级，协助品牌企业快速建立线上线下一体化系统，包括会员、营销、产品、库存、门店等全维度体系，帮助品牌打造自有流量池，实现全渠道全场景互联互通、精准触达与高效互动，最终实现智慧化、智能化的新零售模型。
根据您提交的需求，将有售前专家免费服务！...企业会员全生命周期精细化运营和管理，数据智能化驱动会员权益和营销更加精准、有效.全渠道全场景会员管理.线上线下协同.快速实现门店数字化转型升级，完美汇聚多端流量，实现线上线下会员数据、营销数据、交易数据、订单数据无缝打通.加速传统零售行业数字化转型升级.
来自：
解决方案
EMR集群安全认证和授权管理
场景描述 阿里云EMR服务Kafka和Hadoop安全集群使 用Kerberos进行用户安全认证，通过Apache Ranger服务进行访问授权管理。本最佳实践中以 Apache Web服务器日志为例，演示基于Kafka 和Hadoop的生态组件构建日志大数据仓库，并 介绍在整个数据流程中，如何通过Kerberos和 Ranger进行认证和授权的相关配置。 解决问题 1.创建基于Kerberos的EMR Kafka和 Hadoop集群。 2.EMR服务的Kafka和Hadoop集群中 Kerberos相关配置和使用方法。 3.Ranger中添加Kafka、HDFS、Hive和 Hbase服务和访问策略。 4.Flume中和Kafka、HDFS相关的安全配 置。 产品列表：E-MapReduce、专有网络VPC、云服务器ECS、云数据库RDS版
提供 用户在云上使用开源技术建设数据仓库、离线批处理、在线流式处理、即时查询、机 器 学 习 等 场 景 下 的 大 数 据 解 决 方 案。详 情 请 查 看 www.aliyun.com/product/emapreduce Kerberos：Kerberos是一种网络身份验证协议，它旨在通过使用密钥加密为客户 端/服务器应用程序提供强身份验证。它提供了网络上的身份...
专有网络 VPC
阿里云专有网络VPC（Virtual Private Cloud），是由虚拟网络设备（如虚拟交换机/虚拟路由器）组成的虚拟专有网络服务，帮助您基于阿里云构建一个逻辑隔离的私有云。您可以通过专线/VPN等方式与传统数据中心连接，组成一个按需定制的免费虚拟专有网络环境，实现应用的平滑迁移上云。
使用安全组功能，可以将专有网络中的产品实例划分成不同的安全域，并为每个安全域定义不同的访问控制规则.RAM访问控制.可通过 RAM 实现对网络的权限管理.灵活的访问控制规则，满足政务、金融等行业用户的安全隔离规范需求.按需绑定弹性IP到相同地域下VPC类型的云产品实例上，可实现与公网互访.公网出入口管理.使用NAT网关...
来自：
云产品
全域采集与增长分析Quick Tracking
全域采集与增长分析（Quick Tracking）是阿里云推出的应用数据采集及分析产品，为运营、BI、产品和决策层提供一站式数据化运营服务：通用的多维度用户行为分析、自助分析功能、数据无缝对接其他大数据产品，助每个企业实现基于大数据技术的精细化运营能力。
基于营销策略的一方私域标签体系搭建，提供真正运营可用的行为标签.App端性能监控.支持崩溃、卡顿、启动分析、网络分析等性能监控功能.Web端性能监控.支持JS异常、API请求、白屏、用户追踪等性能监控能力.小程序性能监控.支持JS异常、API请求、用户追踪等性能监控能力.移动端性能监控，快速定位异常问题，保障用户体验.适用...
来自：
云产品
Exchange Server云上部署最佳实践
阿里云提供基础设施服务，能够以高可用、高容错且经济实惠的方式将Exchange Server部署在云上。通过在 阿里云上部署，可以获得Exchange Server的功能以及阿里云天然灵活性和安全性。
文档版本：20220119 15 Exchange Server云上部署最佳实践 部署域控制器和 DNS 文档版本：20220119 16 Exchange Server云上部署最佳实践 部署域控制器和 DNS 文档版本：20220119 17 Exchange Server云上部署最佳实践 部署域控制器和 DNS 文档版本：20220119 18 Exchange Server云上部署最佳实践 部署域控制器和 DNS 步骤5 ...
E-HPC低成本实现量化策略回测
在量化交易场景下，量化策略的构建流程一般包括：想法、数据获取、建模、回测、结果分析等，在回测过程中往往需要海量的算力，进行大量数据的分析和处理，如何快速、高效和低成本的进行批量任务的调度，并快速获取结果是量化领域遇到的普遍挑战，这也是云计算能够带给客户的巨大优势。
E-HPC低成本实现量化策略回测 最佳实践 业务架构图 场景描述 在量化交易场景下，量化策略的构建流程一般包 括：想法、数据获取、建模、回测、结果分析等，在回测过程中往往需要海量的算力，进行大量数 据的分析和处理，如何快速、高效和低成本的进 行批量任务的调度，并快速获取结果是量化领域 遇到的普遍挑战，这也是...
远程办公-AD管控下的弹性云桌面
在弹性云桌面中部署企业基础办公环境时，IT人员通常会面临以下问题，本文希望通过场景实践的方式，示范如何结合使用不同阿里云产品，来解决这些问题：用户如何管理？企业已有AD用户如何上云？云上共享文件服务权限怎么管？数据安全问题有保障吗？该如何设置？云桌面能使用本地机房或IDC中的服务吗？ 本文使用的应用场景： 场景1：客户A在云上新建Windows ActiveDirectory（以下简称AD）；弹性云桌面，和NAS文件存储服务部署在AD所在的VPC内。场景2：客户B在阿里云上已有AD和NAS。弹性云桌面创建在与AD不同的VPC中。AD与云桌面的VPC通过CEN连接。场景3：客户C在云下IDC有自建AD和文件服务。弹性云桌面创建在阿里云上。云下机房与阿里云弹性云桌面所在VPC通过IPsec VPN连接。 方案优势： 易部署：弹性云桌面支持快速便捷的桌面环境创建、部署、统一管控与运维。 CEN和VPN网关服务开通即用，配置实时生效，快速完成部署。 低成本：弹性云桌面无需前期传统硬件投资，帮您快速构建安全、高性能、低成本的桌面办公体系。可广泛应用于具有高数据安全管控、高性能计算等要求的金融、设计、视频、教育等领域。VPN网关基于Internet建立加密通道，比建立专线更便宜，快速实现混合云。 安全性：VPN网关使用IKE（秘钥交换协议）和IPSec对传输数据或进行加密，保证数据安全可靠。云桌面自带的安全策略保证数据不落地。 集中管控：通过Windows AD对云桌面用户和共享文件服务进行统一权限管控。可实现AD用户自动同步上云，和文件级别的权限管控。
步骤2 通过 https://vpc.console.aliyun.com/nat/cn-shenzhen/nats 访问深圳区域的 NAT管 理控制台。步骤3 单击组合购买 EIP按钮（NAT网关+弹性公网 IP），完成配置后单击立即购买按 钮。（如已有可用 EIP，可选择 创建 NAT 后再绑定已有 EIP）文档版本：20201210 96 远程办公-AD管控下的弹性云桌面最佳实践 附录 2：用 NAT...
数据库异地灾备
场景描述 适用于不满足于单地域，对数据可靠性 （RPO）和服务可用性（RTO）要求更高 的，希望防范断电、断网等机房故障，抵 御地震、台风等自然灾害，具备异地容灾 备份恢复能力的客户业务场景。 解决问题 1.实时备份，RPO达到秒级 2.表级恢复，故障恢复时间大大缩短 3.长期归档，自动管理备份生命周期 4.异地灾备，构建数据库灾备中心 产品列表 专有网络VPC 云服务器ECS 弹性公网IP（EIP） 负载均衡SLB 云数据库RDSMySQL 数据库备份服务DBS 对象存储服务OSS 数据湖分析服务DLA 数据管理服务DMS 数据传输服务DTS
步骤8 在恢复任务列表，可以看到该恢复任务状态从初始化中，运行中，变到完成，单击管 理，可查看恢复任务详情。文档版本：20220207 84 数据库异地灾备 容灾演练 步骤9 恢复完成后，点击 恢复任务 ID，进入恢复任务配置页面。步骤10 点击 RDS实例 ID，跳转 RDS控制台。步骤11 点击 查看连接详情。文档版本：20220207 85 ...
云上高并发系统改造
场景描述 随着业务的发展，系统并发压力越来越大，如何 进行系统改造以满足高并发场景的业务需求成 为了一个技术难题。本实践抽象于客户的实际场 景，提供高并发下系统改造的理论指导和部分实 操演示。主要适用于以下场景： 1.系统并发压力大，需要进行系统应用改造。 2.数据层并发压力大，需进行分库分表改造。 3.数据库数据量巨大，亟待分库分表解决查询 和写入瓶颈的场景。 方案优势/解决问题 1.在水平扩展阶段，我们除了通过SLB做负载 均衡外，我们可以通过SLB下挂nginx的方 式，增加负载均衡侧的可扩展性 2.在数据库拆分阶段，在做好数据规划后，我 们借助DTS进行数据迁移，通过DRDS将 RDS MySQL的数据拆分到多个分库和分 表中。 产品列表 专用网络VPC 负载均衡SLB 云服务器ECS 数据库RDSMySQL 数据传输服务DTS PrivateZone 分布式关系型数据库DRDS
云上高并发系统改造 最佳实践 场景描述 部署架构图 ...通常可以预估 1到 2 年的数据增长量，用估算出的总数据量除以总的物理分库数，再除以建议的最大数 据量 500万，即可得出每个物理分库上需要创建的物理分表数：物理分库上的物理分表数=向上取整(估算的总数据量/(RDS 实例数*8)/5,000,000)详细拆分 DEMO 可参考官网文 档：...
智能接入网关SAG
智能接入网关（Smart Access Gateway，简称SAG）是阿里云提供的一站式快速上云接入产品，企业可通过智能接入网关SDWAN技术实现Internet就近加密上云，适用于中小数据中心、分支互联、移动办公、应用加速及混合云等场景。阿里云SAG产品配置高度自动化，即插即用，网络拓扑变化自适应快速收敛，自动探测最优链路，故障时主动实时切换，高质量、高安全、高效率的帮助用户解决网络接入最后一公里难题。
使用IKE（秘钥交换协议）和IPsec对传输数据进行加密，保证数据安全传输.认证数据来源，防止重放攻击.通过多种方式对数据进行认证.数据经过加密内网传输，保证数据传输过程中的安全性.物理专线接入.基于运营商物理专线的高可靠、高性能、低时延的一站式上云服务.Internet宽带接入.可直接复用已有的Internet固定宽带接入，...
来自：
云产品
跨云迁移单写双读过渡架构
概述 在搬站场景下，涉及迁移跨度较长，在过渡阶段客户需要跨云访问，如何保障数据链路的高可用尤为关键，采用专线和公网双备的方案保障数据传输的高可用，也降低双专线的迁移成本。 适用场景 数据迁移链路的高可用 跨云迁移过渡期架构 读写分类架构设计 技术架构 本实践方案基于如下图所示的技术架构和主要流程编写操作步骤： 方案优势 在迁移时间持续较长的情况下，使用单写双读架构降低业务改造成本。 使用数据库网关做专线和公网互备。 流量逐渐灰度验证，保障迁移平滑过渡。 安全：原生的多租户系统，以项目进行隔离，所有计算任务在安全沙箱中运行。
它底层的数据流基础设施为阿里双 11异地多 活基础架构，为数千下游应用提供实时数据流，已在线上稳定运行 6年之久。您 可以使用数据传输轻松构建安全、可扩展、高可用的数据架构。详见：https://www.aliyun.com/product/dts 云企业网：阿里云致力于为用户提供优质、高效、稳定的网络传输环境，云企业网（Cloud Enterprise ...
房地产数字化营销售楼解决方案
阿里云联合支付宝以及生态合作伙伴，整合阿里体系内的广告资源实现精准引流，给房地产企业提供的一个端到端的轻量级线上售楼处，帮助客户实现精准圈客、线上转化和快速锁客的解决方案，同时也可实现应对疫情对行业的影响，为复工复产提供充足蓄客能力。
跟地产企业自身的用户数据库打通，可轻松实现客户向企业私域流量池的沉淀.线上快速获客.阿里巴巴流量加持的24小时在线实景售楼处，实现地产企业的高效引流获客.方案由阿里云联合支付宝以及生态合作伙伴推出，整合阿里巴巴体系内的广告资源实现精准引流，给房地产企业提供的一个端到端的轻量级线上售楼处，帮助客户实现精准...
来自：
解决方案
混合云自有K8S弹性使用ECI
场景描述 本文介绍线下IDC与云端通过专线构建混合云架构，自有K8S利用虚拟节点弹性调用ECI承载业务高峰期资源需求的最佳实践。 解决问题 混合云环境下，自有K8S集群注册至ACK，实现云端纳管。纳管K8S集群部署Virtual Node，使集群具备ECI资源调度能力。在以上环境中部署Web及离线作业应用，并使用ECI资源作为弹性资源池满足业务波峰需求。 产品列表 云服务器ECS 云架构设计工具CADT 专有网络VPC 访问控制RAM 云企业网CEN 弹性容器实例ECI Nat网关NAT 容器镜像服务ACR 负载均衡SLB 容器服务Kubernetes版ACK 弹性公网IPEIP
用户可以方便的对云上架构方案的成本、部署、运维、回收进行全生命周期的管 理。更 多 信 息，请 参 见 云 架 构 设 计 工 具 CADT 简介 https://help.aliyun.com/product/182827.html 专有网络 VPC：Virtual Private Cloud，简称 VPC，是基于阿里云创建的自定义 私有网络，不同的专有网络之间二层逻辑隔离。您可以在自己...
Openstack迁移DDH
场景描述 在线下IDC中，很多用户使用OpenStack构建云环境，本 文介绍如何将线下IDC中基于OpenStack构建的云服务器 迁移到阿里云专有宿主机（DDH）上，从而实现业务平滑 上云的同时，显著降低成本。 解决问题 1.如何将OpenStack中的云服务器迁移 DDH上。 2.如何使用DDH构建云上环境。 产品列表 专有宿主机DDH 对象存储OSS 服务器迁移中心SMC 专有网络VPC
您还可以获得这台物理服务器的物理属性信息，包括CPU 数量（Socket数）、物理CPU核数、内存大小，并根据宿主机规格创建指定规格 族的ECS实例。详见https://help.aliyun.com/document_detail/68563.html 服务器迁移中心SMC：服务器迁移中心SMC（ServerMigrationCenter）是阿里 云自主研发的迁移平台，可将您的单台或多...
自建Hadoop迁移到阿里云EMR
场景描述 场景1：自建Hadoop集群数据（HDFS）迁移到 阿里云EMR集群的HDFS文件系统； 场景2：自建Hadoop集群数据（HDFS）迁移到 计算存储分离架构的阿里云EMR集群，以OSS 和JindoFS作为EMR集群的后端存储。 解决的问题 客户自建Hadoop迁移到阿里云EMR集群的 技术方案； 基于IPSecVPN隧道构建安全和低成本数据 传输链路 产品列表 E-MapReduce，VPC，ECS，OSS，VPN网关。
VPN网关 VPN网关是一款基于 Internet的网络连接服务，通过加密通道的方式实现企业数 据中心、企业办公网络或 Internet终端与阿里云专有网络（VPC）安全可靠的连 接。VPN 网关提供 IPSec-VPN 连接和 SSL-VPN 连接。详情请查看 https://www.aliyun.com/product/vpn IPSec VPN 基于路由的 IPSec-VPN，不仅可以更方便的配置和...
- 产品推荐
- 这些文档可能帮助您