基于Flink+ClickHouse构建实时游戏数据分析
在互联网、游戏行业中，常常需要对用户行为日志进行分析，通过数据挖掘，来更好地支持业务运营，比如用户轨迹，热力图，登录行为分析，实时业务大屏等。当业务数据量达到千亿规模时，常常导致分析不实时，平均响应时间长达10分钟，影响业务的正常运营和发展。 本实践介绍如何快速收集海量用户行为数据，实现秒级响应的实时用户行为分析，并通过实时流计算Flink/Blink、云数据库ClickHouse等技术进行深入挖掘和分析，得到用户特征和画像，实现个性化系统推荐服务。 通过云数据库ClickHouse替换原有Presto数仓，对比开源Presto性能提升20倍。 利用云数据库ClickHouse极致分析性能，千亿级数据分析从10分钟缩短到30秒。 云数据库ClickHouse批量写入效率高，支持业务高峰每小时230亿的用户数据写入。 云数据库ClickHouse开箱即用，免运维，全球多Region部署，快速支持新游戏开服。 Flink+ClickHouse+QuickBI
表结构说明：步骤2 创建分布式表，分布式表本身并不存储数据，它基于本地表里面的数据，提供一个分 布式访问数据的框架，比如这里的分布式表 d_user_behavior_uv，它基于本地表 user_behavior_uv_local，选择 Distrubted表引擎，它后面的参数，依次是集群名、库 名、表名、数据分配方式。说明：创建分布式表的 SQL语句，...
通过RocketMQ事务消息实现分布式事务
在日益复杂的分布式系统中，确保数据一致性成为一大挑战。本方案利用RocketMQ强大事务消息能力，确保跨服务事务的高可靠与最终一致性，同时还实现了事务处理的高效执行，是构建高性能、高可用分布式系统的关键路径。
在日益复杂的分布式系统中，确保数据一致性成为一大挑战。本方案利用RocketMQ强大事务消息能力，确保跨服务事务的高可靠与最终一致性，同时还实现了事务处理的高效执行，是构建高性能、高可用分布式系统的关键路径。通过RocketMQ事务消息实现分布式事务 在日益复杂的分布式系统中，确保数据一致性成为一大挑战。本方案利用...
来自：
技术解决方案
通过PAI-灵骏分布式训练和部署Llama 2模型
灵骏支持业界各类流行的开源大语言模型，包括Llama2系列、Bloom系列、Falcon系列、GLM/ChatGLM系列，以及领域大模型galactica等的高效训练和部署。本方案整体可用于企业样本标注、创意文本生成、智能对话助手、文本类创作辅助等场景。
训练效率、性价比提升 大模型训练只需简单配置即可自动分布式并发执行，优化的计算、网络、通信和存储架构提高资源利用率，加快模型训练速度，大幅缩减训练时间和成本 架构与部署 通过PAI-灵骏分布式训练和部署Llama 2模型 本方案实现了大模型开发全链路打通，流程全面覆盖训练到部署各环节，简化大模型应用，加速其在业务...
来自：
技术解决方案
灵活配置，高效执行，快速集成分布式任务调度
企业级应用中经常会遇到数据定时处理、文件处理、报表生成等定时处理的任务，对于任务配置和执行率有较高要求，本文介绍如何利用SchedulerX来实施企业级定时任务的调度与管理，为定时任务提供高效、稳定和灵活的解决方案。
在线部署 适用客户 有托管式任务管理需求 需要处理大规模数据处理任务 实现复杂任务编排与多样化任务类型支持的场景 方案优势 为什么选择 SchedulerX 阿里云分布式任务调度服务（SchedulerX）通过高可用性、高可靠性、强大的分布式架构和丰富的调度策略，为企业提供了一种灵活、高效、安全的任务调度解决方案。高可用性与高...
来自：
技术解决方案
分布式任务调度 SchedulerX
SchedulerX 是阿里巴巴自研的基于 Akka 架构的分布式任务调度平台（兼容开源 XXL-JOB/ElasticJob/K8s Job/Spring Schedule），支持 Cron 定时、一次性任务、任务编排、分布式数据处理，具有高可用、可视化、可运维、低延时等能力。
分布式计算 提供单机、广播、Map、MapReduce 和分片等多种分布式编程模型，简单几行代码即可通过您自己的机器自建分布式引擎，进行大数据跑批。报警监控 全面的监控指标，丰富及时的报警方式，便于运维人员快速定位和解决线上问题。典型应用场景轻量级 ETL 通过轻量级分布式任务直接处理数据库或 OSS 中的数据。相对于传统...
来自：
云产品
云原生分布式数据库PolarDB-X
阿里云云原生分布式数据库PolarDB-X（原DRDS升级版），可解决分库分表、海量数据存储、超高并发吞吐、复杂计算效率等问题。最高可支撑千万级并发和百PB级海量存储。
PolarDB 分布式版升级发布会，共建云原生分布式数据库生态 最新发布 公告 PolarDB产品体验升级和优化 新功能 PolarDB分布式版V2.3 集中式和分布式一体化开源发布 新功能 将DRDS模式数据库转换为AUTO模式数据库 新功能 Binlog日志服务 方案咨询 业务中台技术解决方案产品规格 PolarDB 新用户首次购买包年包月实例，指定规格...
来自：
云产品
金融分布式架构SOFAStack
阿里云金融分布式架构SOFAStack为金融用户提供全栈式的基础架构能力，是集项目管理、微服务开发、发布部署、监控运维、容灾高可用等全栈式解决方案，助力客户应用轻松转型分布式架构，保证风险安全的同时帮助业务需求敏捷迭代，支撑金融业务创新，开发人员学习成本最多可降低92%、应用开发效率可最多提升80%、运维人力成本最多可节省90%
金融分布式架构 SOFAStack™（Scalable Open Financial Architecture Stack）是构建金融级云原生架构的应用平台，沉淀了金融场景的最佳实践，提供服务构建、应用开发、部署发布、服务治理、监控运维、容灾高可用等全栈式解决方案，兼容Dubbo、Spring Cloud等微服务运行环境，助力客户各类应用轻松转型分布式架构....
来自：
云产品
分布式身份服务
分布式身份服务 DIS 通过蚂蚁区块链，安全的存储个人和企业用户的身份信息，并在保护隐私的情况下为用户、用户信息提供方、用户信息使用方提供身份标识和信息交互，使得企业和机构可以更合规的使用和管理用户身份信息及数据授权，而身份信息的真实性得到了极大的保障。
分布式身份服务 DIS.蚂蚁区块链分布式身份服务 DIS（Decentralized Identity Service），是一种基于区块链的数字身份注册和管理方案，符合W3C规范，能够更高效地保护用户的数据隐私安全，同时让数据的流转更加可信与合法合规，有效解决机构验证身份信息的真实性和机构间数据合作的难题.分布式身份服务 DIS.蚂蚁区块链分布式...
来自：
云产品
企业级分布式数据库解决方案
企业级分布式数据库解决方案挂载管理多个云数据库 RDS for MySQL，可线性提升数据存储容量及并发吞吐。为企业级客户提供弹性、稳定、高效的企业级分布式关系型数据库解决方案。
企业级分布式数据库解决方案.通过阿里云云原生分布式数据库 PolarDB-X 1.0 挂载管理多个云数据库 RDS for MySQL，可线性提升数据存储容量及并发吞吐。为企业级客户提供弹性、稳定、高效的企业级分布式关系型数据库解决方案.PolarDB-X 全新升级.谢赟辉,靖鑫,也树.企业级分布式数据库解决方案.云原生分布式数据库 PolarDB-X 1...
来自：
解决方案
区块链分布式身份服务解决方案
区块链分布式身份服务解决方案提供基于区块链技术的实体身份标识及可信数据交换服务，具有分布式、多中心等特性。该服务符合 W3C DID 以及 W3C VC 规范，实体可以对数字身份进行便捷的创建、验证、管理。此外，实体之间能够进行可验证声明的颁发，用以满足复杂的场景需求。
区块链分布式身份服务解决方案.通过蚂蚁链安全地存储个人和企业用户的身份信息，并在保护隐私的情况下为用户、用户信息提供方、用户信息使用方提供身份标识和信息交互，使得企业和机构可以更合规的使用和管理用户身份信息及数据授权，而身份信息的真实性得到了极大的保障.解决方案模板页-卡片.靖鑫,也树,英布,墨峰.靖鑫,也...
来自：
解决方案
企业级分布式应用服务EDAS
阿里云企业级分布式应用服务EDAS是一个围绕应用和微服务的PaaS平台，提供多样的应用发布能力和轻量级微服务解决方案，帮助用户解决在应用和服务管理过程中监控、诊断和高可用运维问题，完全兼容Dubbo和Spring Cloud，助您轻松转型企业级互联网架构。
企业级分布式应用服务EDAS（Enterprise Distributed Application Service）是一个应用PaaS平台，一站式集成微服务、可观测、任务调度等技术；以专业易用的应用全生命周期管理、流量及容量治理等功能，配合业务视角的验收、资源管控与成本优化能力，助力企业应用架构云原生化升级.80A_首页banner.谢赟辉,靖鑫,也树.EDAS 可以...
来自：
云产品
云上高并发系统改造
场景描述 随着业务的发展，系统并发压力越来越大，如何 进行系统改造以满足高并发场景的业务需求成 为了一个技术难题。本实践抽象于客户的实际场 景，提供高并发下系统改造的理论指导和部分实 操演示。主要适用于以下场景： 1.系统并发压力大，需要进行系统应用改造。 2.数据层并发压力大，需进行分库分表改造。 3.数据库数据量巨大，亟待分库分表解决查询 和写入瓶颈的场景。 方案优势/解决问题 1.在水平扩展阶段，我们除了通过SLB做负载 均衡外，我们可以通过SLB下挂nginx的方 式，增加负载均衡侧的可扩展性 2.在数据库拆分阶段，在做好数据规划后，我 们借助DTS进行数据迁移，通过DRDS将 RDS MySQL的数据拆分到多个分库和分 表中。 产品列表 专用网络VPC 负载均衡SLB 云服务器ECS 数据库RDSMySQL 数据传输服务DTS PrivateZone 分布式关系型数据库DRDS
部署高并发数据库环境 简介：DRDS 是一款基于 MySQL 存储、采用分库分表技术进行水平扩展的分布 式 OLTP 数据库服务产品，支持 RDS for MySQL 以及 POLARDB for MySQL，产品目标旨在提升数据存储容量、并发吞吐、复杂计算效率三个方面的扩展性需求。场景：DRDS 非常适用于面向拥有超高并发，大规模数据存储的互联网在线事务...
Spring Cloud Netflix应用迁移EDAS
场景描述 Spring Cloud Netflix微服务应用迁移到EDAS 服务（SpringCloud Alibaba云版本）的方法， 迁移后充分利用阿里云监控、调用链、限流降级 等能力，优化应用生命周期管理。 解决问题 1.帮助自建SpringCloudNetflix微服务应用 通过简单修改迁移到阿里云企业级分布式 应用服务（EDAS）平台。 2.迁移到EDAS后，简化应用的运维，提升监 控、调用链探测、限流降级等管理能力，提 高对应用的全生命周期管理。 产品列表 企业级分布式应用服务（EDAS） 负载均衡（SLB） 专有网络（VPC） 云服务器（ECS）
文档版本：20200106 9 Spring Cloud Netflix应用迁移 EDAS 搭建线下微服务应用环境 步骤4 编译项目 在项目根目录下执行下面命令：mvn package-DskipTests 编译成功后可以看到如下图所示结果：至此，PiggyMetrics项目的源码下载并编译成功，后续将修改配置并运行代码。打开 文档版本：20200106 10 Spring Cloud Netflix应用...
云速搭CADT部署PolarDB-X 1.0
通过云速搭 CADT 实现云原生分布式数据库 PolarDB-X 1.0 的部署。
详见：https://www.aliyun.com/product/developerservices/cadt 云原生分布式数据库 PolarDB-X：PolarDB-X 是由阿里巴巴自主研发的云原生分 布式数据库，具备水平扩容、金融级高可用、HTAP混合负载、兼容 MySQL 等 重要特性，专注解决超高并发吞吐、海量数据存储、大表瓶颈等数据库瓶颈难题，历经各届天猫双 11及阿里云各...
- 产品推荐
- 这些文档可能帮助您