基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步
应用场景 在大数据场景，企业的Kafka实例可能存在多种情况，比如使用阿里云Kafka服务，可能是自建开源Kafka，或者是其他云上的云Kafka。不同的业务使用不同类型的Kafka实例，在这个前提下Kafka实例之间可能会需要消息同步的情况： 同帐号容灾场景：比如Kafka实例都是阿里云Kafka，但是Kafka实例会有主备之分，需要将主Kafka实例的消息实时同步到备Kafka。 跨帐号或异地容灾：这类场景比如主Kafka是阿里云Kafka，备Kafka是IDC开源自建Kafka，或者是其他云上的Kafka。 不同业务之间消息同步：因为现在的业务通常不会是信息孤岛，都需要消息互通，所以可能是A业务的Kafka实例消息需要同步到B业务的Kafka实例，并且这两个Kafka实例归属不同的RAM角色，有自己独自的权限控制。 解决问题 解决使用开源组件做消息同步的高成本问题。 解决使用开源组件做消息同步的并发性能、稳定性问题。 解决使用开源组件做消息同步的可靠性问题（重试机制，容错机制，死信队列等）。 大幅提升构建消息同步架构的效率，降低构建复杂度问题。
该场景也可以衍生为阿里云Kafka向其他云厂商的云Kafka进行消息、元数据同步的 场景，原理是一致的。方案限制 该方案场景只支持单向同步，不支持双向同步。产品介绍 专有网络VPC（VirtualPrivateCloud）：是用户基于阿里云创建的自定义私有网络,不同的 专有网络之间二层逻辑隔离，用户可以在自己创建的专有网络内创建...
企业级分布式数据库解决方案
企业级分布式数据库解决方案挂载管理多个云数据库 RDS for MySQL，可线性提升数据存储容量及并发吞吐。为企业级客户提供弹性、稳定、高效的企业级分布式关系型数据库解决方案。
云原生分布式数据库 PolarDB-X 1.0 通过分库分表管理多个 RDS for MySQL，可线性提升数据存储容量及并发吞吐，有效解决单机数据库的扩展性难题。云原生分布式数据库 PolarDB-X 1.0 提供多种只读实例，可抵御超高并发的访问压力、加速复杂查询的响应时间。通过物理资源隔离的方式，缓解 PolarDB-X 主实例的压力负载，降低...
来自：
解决方案
弹性裸金属自建ORACLE数据库双机
场景描述 1.客户业务系统选型ORACLE数据库且不愿做 业务改造：由于历史原因，客户业务系统只支持 ORACLE数据库，客户没有技术/时间去做技术栈 改造。 2.高性能：希望拥有比虚拟机更高的性能和稳定 性，以保障数据库高性能，支撑高并发的业务系 统。 3.高可用：追求数据库服务的高可用，在某一台数 据库服务器宕机时快速切换备机，实现对业务应 用的最小影响。 4.数据安全性：极端情况下能找回数据，数据备份 和恢复更方便。
技术基础 1.1.DataGuard技术原理简介 Oracle DataGuard是 Oracle自带的数据同步功能，基本原理是将日志文件从原数据 库传输到目标数据库，然后在目标数据库上应用这些日志文件，从而使目标数据库与 源数据库保持同步，是一种数据库级别的高可用性方案。DataGuard可以提供 Oracle数据库的冗灾、数据保护、故障恢复等，实现...
函数计算实现弹性音视频处理系统
场景描述 本示例通过函数计算部署一个高弹性高可用的 音视频处理系统。尤其适合视频网站使用，每天 有大量的上传视频，需要及时转码处理以适配各 种终端及网络条件，要求短时间内准备大量的计 算资源进行大规模并行转码处理，同时希望基于 FFmpeg自建的转码服务能简单迁移。 解决问题 1.如何使用函数计算部署音视频处理系统。 2.如何进行系统的压测。 产品列表 函数计算服务 文件存储NAS 对象存储OSS 函数工作流FnF 日志服务SLS
使用 RESTful API 可以在互联网任何位置存储和访问，容量和处 理能力弹性扩展，多种存储类型供选择全面优化存储成本。详见 https://www.aliyun.com/product/oss 函数工作流（Function Flow，简称 FnF）:是一个用来协调多个分布式任务执行的 全托管 Serverless 云服务，致力于简化开发和运行业务流程所需要的任务协调、状态...
云基础产品与基础设施
云基础产品与基础设施作为阿里云产品六大版块之一，主要包含弹性计算、存储、网络、安全、云原生应用平台以及无影和基础设施类产品，向客户提供高度自动化的标准化产品对网络功能、计算机（虚拟或专用硬件）和数据存储空间进行访问，同时支持灵活扩展，可以直接使用自助服务界面。
十分钟掌握阿里自研零运维分布式结构化数据存储 Tablestore，轻松构建百亿量级数据存储架构.4天实战 轻松玩转docker.docker原理及在运维工作的地位和作用，运维工作进化论，docker、微服务、k8s的联系，devops和docker的关系，docker的前世今生。容器，镜像和仓库，容器和虚拟化，优势和劣势，底层核心；容器除了docker还有...
来自：
云产品
云数据库 RDS MySQL版
阿里云云数据库RDS MySQL是一种稳定可靠、可弹性伸缩的在线MySQL数据库服务, 提供了高可用、高可靠、高安全、易运维等一站式的数据库解决方案，帮助您免除MySQL运维的烦恼。
查看更多了解 RDS MySQL 定价策略,持续管控和优化成本安全合规云数据库 RDS MySQL 基于飞天分布式系统和全 SSD 盘高性能存储，在网络通信、数据存储、访问控制、安全审计、实例容灾等多个维度提供全方位多样化的安全加固功能，一站式保障用户数据的可靠性和安全性。网络安全攻击防护：RDS 提供多种攻击防护的手段，包括防 ...
来自：
云产品
MySQL数据库上云选型解决方案
MySQL数据库上云选型解决方案，MySQL数据库成为近十年来数据库使用范围最广，数据库生态最好的开源数据库，本方案以MySQL数据库上云的各种场景为切入点，包括数据库的扩展性、数据库水平拆分、数据库垂直拆分、高弹性数据库、数据库大促支持、MySQL数据库海量数据分析等向上云的企业客户介绍如何选择适合企业的MySQL生态数据库。
使用PolarDB存储包.PolarDB MySQL性能白皮书.PolarDB MySQL创建实例.PolarDB-X适用场景.PolarDB-X基本原理.PolarDB-X SQL手册.PolarDB-X 全局二级索引.PolarDB-X 创建实例.PolarDB-X快速入门.分析型数据库MySQL版应用场景.分析型数据库MySQL版TPC-H测试.分析型数据库MySQL版产品优势.分析型数据库MySQL版数据同步.分析型...
来自：
解决方案
自建Hive数据仓库跨版本迁移到阿里云Databricks数据洞察
场景描述 客户在IDC或者公有云环境自建Hadoop集群构建数据仓库和分析系统，购买阿里云Databricks数据洞察集群之后，涉及到数仓数据和元数据的迁移以及Hive版本的订正更新。 方案优势 1. 全托管Spark集群免运维，节省人力成本。 2. Databricks数据洞察与阿里云其他产品（OSS、RDS、MaxCompute、EMR）进行深度整合，支持以这些产品为数据源的输入和输出。 3. 使用Databricks Runtime商业版引擎相比开源Spark性能有3-5倍的提升。 解决问题 1. Hive数仓数据迁移OSS方案。 2. Hive元数据库迁移阿里云RDS方案。 3. Hive跨版本迁移到Databricks数据洞察使用Delta表查询以提高查询效率。
基于阿里云分布式文件系统和 SSD盘 高性能存储，RDS支持 MySQL、SQL Server、PostgreSQL、PPAS（高度兼容 Oracle）和 MariaDB引擎，并且提供了容灾、备份、恢复、监控、迁移等方面的 全套解决方案。详见：https://www.aliyun.com/product/rds/mysql 文档版本：20210425 III 自建 Hive数据仓库跨版本迁移到阿里云 Databricks...
云数据库 SelectDB 版
阿里云数据库 SelectDB 是现代化实时数据仓库 SelectDB 在阿里云上的全托管服务，内核基于业界领先的开源分析型数据库 Apache Doris 研发，由阿里云和飞轮科技联合打造。阿里云数据库 SelectDB 聚焦于满足企业级大数据分析需求，广泛应用于实时报表分析、即席多维分析、日志检索分析、数据联邦与查询加速等场景，致力于为客户提供极致性能、简单易用的数据分析服务。
云数据库 SelectDB 版原理架构 云原生存算分离架构、多计算集群、共亨存储，让海量数据分析更快、成本更低。快速开启您的云上实时数据分析之旅产品优势实时极速解决性能问题SelectDB 在宽表聚合、多表关联分析、高并发点查场景下，均具有极致的查询性能。登顶全球分析型数据库榜单 ClickBench，多项指标世界第一。支持实时...
来自：
云产品
自建Hadoop迁移到阿里云EMR
场景描述 场景1：自建Hadoop集群数据（HDFS）迁移到 阿里云EMR集群的HDFS文件系统； 场景2：自建Hadoop集群数据（HDFS）迁移到 计算存储分离架构的阿里云EMR集群，以OSS 和JindoFS作为EMR集群的后端存储。 解决的问题 客户自建Hadoop迁移到阿里云EMR集群的 技术方案； 基于IPSecVPN隧道构建安全和低成本数据 传输链路 产品列表 E-MapReduce，VPC，ECS，OSS，VPN网关。
EMR 迁移到其他阿里云存储服务 6.2.HDFS数据迁移到 JindoFS块存储模式存储空间 JindoFS存储空间为块存储模式时，上传到 OSS的文件并不是同名文件，是以块的形 式来存储的。步骤1 按照章节 6.1.1的步骤，将 JindoFS的存储空间模式变更为块存储模式，按照如下规 划更改之后，执行 Bigboot配置保存、Bigboot部署客户端配置、...
- 产品推荐
- 这些文档可能帮助您