Function Compute构建高弹性大数据采集系统
当前互联网很多场景都存在需要将大量的数据信息采集起来然后传输到后端的各类系统服务中，对数据进行处理、分析，形成业务闭环。比如游戏行业中的游戏发行、游戏运营，产互行业中的数字营销，物联网、车联网行业中的硬件、车辆信息上报等等。这些场景普遍存在数据采集量大、数据传输需要稳定且吞吐量大的特点，给整个数据采集传输系统带来很大的挑战。在这个场景中，有三个关键的环节，数据采集、数据传输、数据处理。该最佳实践主要涉
性能压测.51 文档版本：20210806（发布日期）1 Function Compute构建高弹性大数据采集系统 最佳实践概述 最佳实践概述 概述 当前互联网很多场景都存在需要将大量的数据信息采集起来然后传输到后端的各类系 统服务中，对数据进行处理、分析，形成业务闭环。比如游戏行业中的游戏发行、游 戏运营，产互行业中的数字营销，...
云上高并发系统改造
场景描述 随着业务的发展，系统并发压力越来越大，如何 进行系统改造以满足高并发场景的业务需求成 为了一个技术难题。本实践抽象于客户的实际场 景，提供高并发下系统改造的理论指导和部分实 操演示。主要适用于以下场景： 1.系统并发压力大，需要进行系统应用改造。 2.数据层并发压力大，需进行分库分表改造。 3.数据库数据量巨大，亟待分库分表解决查询 和写入瓶颈的场景。 方案优势/解决问题 1.在水平扩展阶段，我们除了通过SLB做负载 均衡外，我们可以通过SLB下挂nginx的方 式，增加负载均衡侧的可扩展性 2.在数据库拆分阶段，在做好数据规划后，我 们借助DTS进行数据迁移，通过DRDS将 RDS MySQL的数据拆分到多个分库和分 表中。 产品列表 专用网络VPC 负载均衡SLB 云服务器ECS 数据库RDSMySQL 数据传输服务DTS PrivateZone 分布式关系型数据库DRDS
尽可能避免跨库查询：关联查询的数据尽量分散到同一个分片中，跨库查询对系 统性能损耗很大。避免跨分表联表查询的方式有：a)剥离出高频访问的表，与核心表 1:1关系的，进行反范式设计，将核心表加 宽 b)如果与核心表是 N：1关系的，将高频访问字段冗余到核心表中 c)低频访问数据，业务功能设计上，避免一页展示大而全，...
云原生数据仓库AnalyticDB MySQL数据仓库
阿里云云原生数据仓库AnalyticDB MySQL版（简称AnalyticDB）是融合数据库、大数据技术于一体的云原生企业级数据仓库平台。云原生数据仓库AnalyticDB MySQL版支持数据实时写入和同步更新、实时计算和实时服务，可用于构建企业级报表系统、数据仓库和数据服务引擎。
通过智能的业务分析系统快速获得实时的业务数据，实现海量数据的即席分析查询，充分挖掘数据价值，支撑更高效的业务决策.运营效率提升.云服务器ECS.云数据库RDS MySQL版.数据传输DTS.推荐搭配产品.物联网：终端信息实时查.查询效率提升数倍，综合成本大幅降低.该场景客户需降低海量的历史订单和监控数据的存储成本，并确保...
来自：
云产品
云备份 Cloud Backup
云备份 Cloud Backup作为阿里云数据统一灾备平台，是一种简单易用的公共云灾备服务，可以为阿里云ECS上的数据库、文件系统、NAS、OSS以及自建机房内的文件、虚拟机、大规模NAS等提供安全、高效的备份和容灾保护。图形化界面集中配置备份策略，并完全托管备份活动，轻松满足业务与合规需求。
本地 NAS 系统可使用 Cloud Backup 的文件智能分析能力，全面了解数据特点和优化效果后进行热数据备份、冷数据策略化归档；支持 PB 级归档库全局检索，可秒级发现归档文件.解决方案与优势.使用Cloud Backup为本地数据备份、归档上云，省TCO、天级上线、公共云天然的可扩展性，任务失败自动告警，为客户自建机房内的各类数据...
来自：
云产品
容器服务 Kubernetes 版 ACK
阿里云容器服务Kubernetes版ACK（容器服务Kubernetes版，简称ACK）支持企业级K8s容器化应用的全生命周期管理，提供高性能可伸缩的容器应用管理能力，助力企业高效运行云端K8s容器化应用。
数据安全：默认加密容器服务 ACK 管控侧用户数据，保证客户数据在容器服务 ACK 管控侧传输全链路TLS加密，同时提供完备的审计和控制面组件日志投递能力。供应链安全安全左移：提供镜像构建、安全扫描、全球同步和部署的自动化集成应用交付链能力，帮助企业客户构建高效安全交付和自动化安全运维能力，践行安全左移原则。...
来自：
云产品
云数据库RDS PostgreSQL
云数据库RDS PostgreSQL 版完全兼容开源PostgreSQL，基于云原生架构，软硬协同优化，提供稳定可靠、高性价比的数据库服务。通过丰富的插件拓展，支撑各领域场景化业务，如自研Ganos多维多模时空引擎及开源PostGIS地理信息引擎、向量引擎、时序引擎等百余款插件。
数据在用户侧加密后传入云数据库，数据库中存储的、网络中传输的、内存中缓存的的都是加密后的数据，数据拥有者以外的任何人无法接触到用户的明文数据，端到端全链路避免数据泄漏的发生.OSS云存储扩展.通过外部表的方式将OSS云存储中的CSV格式化文件当成本地数据表进行使用，支持与本地数据表进行JOIN、数据读写，借助OSS...
来自：
云产品
应用实时监控服务ARMS
作为云原生可观测平台，应用实时监控服务 ARMS 包含前端监控、应用监控、云拨测等模块。覆盖浏览器、小程序、APP、分布式应用、容器等不同可观测环境与场景。帮助企业实现全栈性能监控与端到端追踪诊断。提高监控效率，压降运维工作量。
默认集成阿里云云服务、SQL 数据库、时序数据库、日志数据、链路数据、企业级应用等数据源.支持 PromQL、SQL 查询语法，并预置多种函数，大幅降低查询工作量.预置热力分布、3D 地图、拓扑关系、树图等百余种异形图表，满足不同数据类型展示与分析需求。打通常见协同工具，灵活制定告警策略与权限分配方式.数据查询/可视化/...
来自：
云产品
VPN网关
阿里云VPN网关（VPN Gateway）是一款基于Internet，通过加密隧道将企业数据中心、办公网或终端与阿里云专有网络（VPC）安全可靠连接起来的服务。VPN网关在国家相关政策法规下提供服务，支持IPsec VPN、SSL VPN及国密算法等丰富特性，满足分支互联、移动办公等接入场景。
使用IKE和IPsec或SSL对传输数据进行加密，保证数据安全可靠.采用双机热备架构，故障时秒级切换，保证会话不中断，业务无感知.基于Internet建立加密通道，比建立专线更便宜，快速实现混合云.即开即用，配置实时生效，快速完成部署；完善的文档与API.标准协议支持.使用行业标准的IPSec和IKE（秘钥交换协议），确保数据通信...
来自：
云产品
服务网格
阿里云服务网格（简称ASM）是一个统一管理微服务应用流量的托管式平台，兼容Istio。通过流量控制、网格观测以及服务间通信安全等功能，可以全方位地简化您的服务治理。它为运行在异构计算基础设施上的服务提供统一的能力，适用于Kubernetes集群、Serverless Kubernetes集群、ECS虚拟机以及自建集群。
系统保障服务的安全和高可用，系统保障服务的安全和高可用，使用服务网格 ASM 用户只需专注于自身业务需求.介绍如何快速将应用部署到ASM.手把手介绍如何使用服务网格.介绍常见问题与处理方式.可查看所有开放的API.无需修改代码，服务网格 ASM 就能为客户提供金丝雀发布、无损上下线、服务鉴权、标签路由等业务应用微服务...
来自：
云产品
全域采集与增长分析Quick Tracking
全域采集与增长分析（Quick Tracking）是阿里云推出的应用数据采集及分析产品，为运营、BI、产品和决策层提供一站式数据化运营服务：通用的多维度用户行为分析、自助分析功能、数据无缝对接其他大数据产品，助每个企业实现基于大数据技术的精细化运营能力。
提供完整的异常影响用户数、异常次数、涉及版本等信息，提供完成异常堆栈信息，便于开发人员快速定位异常原因并修复.支持7*24小时监控告警，按照所需告警频率通过钉钉、企业微信、飞书、邮箱及Webhock API进行告警通知.支持网络分析、启动分析、原生页面、应用内H5等性能监控，优化应用使用体验.支持通过账号ID/设备ID快速...
来自：
云产品
- 产品推荐
- 这些文档可能帮助您