自建Hadoop迁移MaxCompute
自建Hadoop迁移MaxCompute
场景描述 客户基于ECS、IDC自建或在友商云平台自建了大数 据集群,为了降低企业大数据计算平台的成本,提高 大数据应用开发效率,更有效保障数据安全,把大数 据集群的数据、作业、调度任务以及业务数据库整体 迁移到MaxCompute和其他云产品。 解决的问题 自建Hadoop集群搬迁到MaxCompute 自建Hbase集群搬迁到云Hbase 自建Kafka或应用数据准实时同步到 MaxCompute 自建Azkaban任务迁移到Dataworks任务 产品列表 MaxCompute,Dataworks、云数据库Hbase版、Datahub、VPC,ECS。
Dataworks数据库开发控制台 https://ide2-cn-shanghai.data.aliyun.com/ 步骤2 新建业务流程 文档版本:20210723 50 自建Hadoop迁移MaxCompute Azkaban定时任务迁移和改造 步骤3 新建数据集成离线同步任务 文档版本:20210723 51 自建Hadoop迁移MaxCompute Azkaban定时任务迁移和改造 步骤4 双击离线同步任务节点,进行编辑...
来自: 最佳实践 相关产品:云服务器ECS,DataWorks,大数据计算服务 MaxCompute,云数据库 HBase 版,数据总线,云速搭
跨云迁移单写双读过渡架构
跨云迁移单写双读过渡架构
概述 在搬站场景下,涉及迁移跨度较长,在过渡阶段客户需要跨云访问,如何保障数据链路的高可用尤为关键,采用专线和公网双备的方案保障数据传输的高可用,也降低双专线的迁移成本。 适用场景 数据迁移链路的高可用 跨云迁移过渡期架构 读写分类架构设计 技术架构 本实践方案基于如下图所示的技术架构和主要流程编写操作步骤: 方案优势 在迁移时间持续较长的情况下,使用单写双读架构降低业务改造成本。 使用数据库网关做专线和公网互备。 流量逐渐灰度验证,保障迁移平滑过渡。 安全:原生的多租户系统,以项目进行隔离,所有计算任务在安全沙箱中运行。
它底层的数据流基础设施为阿里双 11异地多 活基础架构,为千下游应用提供实时数据流,已在线上稳定运行 6年之久。您 可以使用数据传输轻松构建安全、可扩展、高可用的数据架构。详见:https://www.aliyun.com/product/dts 云企业网:阿里云致力于为用户提供优质、高效、稳定的网络传输环境,云企业网(Cloud Enterprise ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,数据传输,性能测试 PTS,云企业网,云速搭CADT
互联网、电商Elasticsearch搜索
互联网、电商Elasticsearch搜索
场景描述 每一个生活在互联网中的用户,每天都在经 历各种各样的“搜索”,查找电商网站商品、 信用卡账单、查电子发票、查附近的餐厅酒 店、查偶像、查交通等等。相对于传统的关 系型数据库,Elasticsearch只需要几毫秒的 时间,即可查询PB级数据并从中找到匹配 信息。利用Elasticsearch高可用性和易用 性,能够快速处理网站、APP丢给它的文本、 数字、日期、IP以及地理数据。 解决问题 1.电商网站商品、订单、物流等搜索 2.保险行业保单查询 3.互联网教育行业课程搜索 4.O2O行业地理位置搜索等 产品列表 云服务器ECS 专有网络VPC 负载均衡SLB 云数据库RDSMySQL版 Dataworks Elasticsearch 数据传输服务DTS
关系型数据库 RDS:Relational Database Service,简称 RDS,是一种稳定可靠、可弹性伸缩的在线数据库服务。RDS基于阿里云分布式文件系统和 SSD盘高性 能存储,支持 MySQL、SQL Server、PostgreSQL、PPAS和 MariaDB引擎,提 供了容灾、备份、恢复、监控、迁移等方面的全套解决方案,彻底解决数据库运维 的烦恼。更多信息,...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,数据传输,DataWorks,Elasticsearch
同地域跨可用区容灾
同地域跨可用区容灾
场景描述 面向阿里云公共云客户, 1.业务在同一个地域(Region) 2.应用已经无状态 3.在不大幅增加成本的情况下,希望获得支持业务的跨可用区(Zone)容灾能力 3.希望对整体的应用做容灾备份(简称容灾),而非单独的数据库或存储等 解决问题 提供云上高可用架构方案并提供可参考的跨可用区架构提供简单的容灾演练 产品列表 云服务器(ECS)、数据库(RDS)、专有络(VPC)、负载均衡(SLB)、消息队列(MQ)等
据库 以 3.访问电商 读写 网站,并注 检查 册用户。正 常。Redi 不可演练,s 单 容灾由系统 一可 自动完成 用区 不可 用 DRDS 不可演练,容灾由系统 单一 自动完成 可用 区不 可 用 单一 不可演练,容灾由系统 可用 自动完成 区不 可 用 Demo 演练逻辑:ECS 部署的C 可用区出现故障,通过对C 可用区的 ECS(DR001)进行...
来自: 最佳实践 | 相关产品:块存储,云服务器ECS,云数据库RDS MySQL 版,数据传输,访问控制
云原生数据库
PolarDB是阿里云自研的云原生数据库,在存储计算分离架构下,利用了软硬件结合的优势,为用户提供秒级弹性、高性能、海量存储、安全可靠的数据库服务。100%兼容MySQL和PostgreSQL生态,支持分布式扩展,高度兼容Oracle语法。
采用白名单、VPC网络、数据多副本存储等全方位的手段,对数据库数据访问、存储、管理等各个环节提供安全保障.集群版采用共享分布式存储的设计,彻底解决了主从(Master-Slave)异步复制所带来的备库数据非强一致性的问题.云数据库PolarDB MySQL.云服务器ECS.推荐搭配产品.金融/保险:高可用和强读写一致.数据强一致性保证,...
来自: 云产品
数据库RDS PostgreSQL
云数据库RDS PostgreSQL 版完全兼容开源PostgreSQL,基于云原生架构,软硬协同优化,提供稳定可靠、高性价比的数据库服务。通过丰富的插件拓展,支撑各领域场景化业务,如自研Ganos多维多模时空引擎及开源PostGIS地理信息引擎、向量引擎、时序引擎等百余款插件。
全加密数据库 数据在用户侧加密后传入云数据库数据库中存储的、网络中传输的、内存中缓存的的都是加密后的数据数据拥有者以外的任何人无法接触到用户的明文数据,端到端全链路避免数据泄漏的发生。了解详情 OSS云存储扩展 通过外部表的方式将OSS云存储中的CSV格式化文件当成本地数据表进行使用,支持与本地数据表进行...
来自: 云产品
云原生数据仓库AnalyticDB MySQL数据仓库
阿里云云原生数据仓库AnalyticDB MySQL版(简称AnalyticDB)是融合数据库、大数据技术于一体的云原生企业级数据仓库平台。云原生数据仓库AnalyticDB MySQL版支持数据实时写入和同步更新、实时计算和实时服务,可用于构建企业级报表系统、数据仓库和数据服务引擎。
数据库数据接入.配置SLS数据同步链路,将日志数据快速接入.日志数据接入.PolarDB MySQL数据免费接入、多表增量更新物化视图、UDF、Multi-cluster自动弹性等功能上新,欢迎体验!PolarDB MySQL数据免费接入、多表增量更新物化视图、UDF、Multi-cluster自动弹性等功能上新,欢迎体验!查看数据全部产品.AnalyticDB MySQL是...
来自: 云产品
云虚拟主机
阿里云弹性计算为客户提供快速、稳定且安全的云虚拟主机服务,具备99.999%数据可靠性、BGP8线接入、千兆共享带宽,免费快速备案等产品优势;中国虚拟主机服务开创者!
网站或数据库数据备份后,您可以通过自动备份恢复功能,将数据快速恢复到云虚拟主机中.云虚拟主机提供网站检查功能,包括检查主机状态、域名状态、备案状态和环境配置,并为您提供有效的解决指引.您可以通过主机管理控制台将您原有的其他品牌虚拟主机上的网站快捷迁移到万网主机.谢赟辉,靖鑫,也树.个人建站应用,拥有专属...
来自: 云产品
数据管理 DMS
阿里云数据管理服务 DMS 是一款支撑企业 Data+AI 全生命周期的一站式数据管理平台,助您高效、安全地挖掘数据价值和数据库设计开发,以数据驱动决策与创新。
DMS产品概述产品功能选型与定价入门与试用相关资源控制台文档联系我们立即购买Data+AI 数据管理服务 DMS 助您高效、安全地挖掘数据价值,以数据驱动决策与创新立即购买免费试用OneMeta通过统一、开放、跨云的元数据服务OneMeta实现跨云数据库数据仓库、数据湖统一治理智能分布式管理基于AI大模型、Data Fabric赋能企业...
来自: 云产品
云原生数据库 PolarDB
阿里云云原生数据库 PolarDB是一款超级MySQL和PostgreSQL分布式云原生数据库,100%兼容MySQL和PostgreSQL,高度兼容Oracle,无论是集中式部署还是分布式架构,都能轻松融入现有系统,助力企业轻松数据迁移上云。
数据闪回:支持高效查询集群、数据库数据表在过去某个时间点的信息。全密态数据库:对数据库表中的敏感数据列进行加密,这些列中的敏感数据将以密文进行传输、计算和存储。容灾安全多可用区容灾:通过热备集群的数据复制方式和高效的切换机制,提供可用区级别的的数据库可用性。全球数据库网络(GDN):由分布在同一个国家...
来自: 云产品
数据库审计
阿里云数据库审计专业提供智能解析数据库通信流量,细粒度审计数据库访问行为,通过对数据库全量行为的审计溯源、危险攻击的实时告警、风险语句的智能预警,为您最敏感的数据库资产做好最安全的监控保障。
RDS云数据库、ECS自建数据库、线下数据库全审计 安全告警 专业安全分析团队提供400+规则的持续升级,实时监控数据库安全风险 高效分析 每秒万次入库、海量存储、亿级数据秒级响应 高性能解析 双向审计最多可返回999行,单条最多存储64K,支持审计4M超长sql语句 灵活日志存储 更长日志查询范围,存储可扩容,可转存 便捷...
来自: 云产品
云原生数据库PolarDB 分布式版
PolarDB 分布式版是阿里云自主设计研发的高性能云原生分布式数据库产品,为用户提供高吞吐、大存储、低延时、易扩展和超高可用的云时代数据库服务。
推荐搭配产品 云数据库RDS MySQL版 数据传输服务 云原生数据仓库ADB客户案例特步 利用云原生数据库 PolarDB 分布式版产品的高并发写和海量存储能力,支撑了客户全国超过千家门店的零售全渠道业务的数据写入和读取。PolarDB 分布式版的横向扩展能力支持快速扩展数据库的读写性能。同时PolarDB 分布式版的弹性升降配确保...
来自: 云产品
数据库专属集群MyBase
云数据库专属集群MyBase是阿里云专为企业级用户定制优化的解决方案。支持MySQL、PostgreSQL、SQL Server、Redis和MongoDB数据库。具有云资源独享、支持资源超分配,自主可运维、开放权限等特点。MyBase不仅能保障客户独享云资源更加安全、享受到云数据库服务的便捷灵活,同时还满足企业对数据库合规性、安全性和高性能的要求。
混合部署 混合部署多个数据库数据库与业务系统就近部署,满足业务架构实际诉求,提升数据库访问效率。推荐搭配使用 云服务器ECS 负载均衡SLB客户案例小盒科技 在线教育 小盒科技采用云数据库专属集群 MyBase 的方案承载了核心小学业务和网校业务,在专属集群主机之上按需创建出不同的 RDS 数据库实例规格,通过专属集群的...
来自: 云产品
云原生分布式数据库PolarDB-X
阿里云云原生分布式数据库PolarDB-X(原DRDS升级版),可解决分库分表、海量数据存储、超高并发吞吐、复杂计算效率等问题。最高可支撑千万级并发和百PB级海量存储。
推荐搭配产品 云数据库RDS MySQL版 数据传输服务 云原生数据仓库ADB客户案例特步 利用云原生数据库 PolarDB 分布式版产品的高并发写和海量存储能力,支撑了客户全国超过千家门店的零售全渠道业务的数据写入和读取。PolarDB 分布式版的横向扩展能力支持快速扩展数据库的读写性能。同时PolarDB 分布式版的弹性升降配确保...
来自: 云产品
数据库RDS SQL Server版
阿里云SQL Server数据库已含微软License,支持复杂的SQL查询,性能优秀,对基于Windows平台.NET架构的应用程序具有完美的支持,广泛应用于新零售、医疗、房地产等行业。
支持开启透明数据加密(TDE),数据落盘自动加密,远离拖风险.SQL Server支持SQL审计功能,记录所有访问源和访问行为信息。对所有安全及故障事件做到有据可查.自动监控预警,定期性能巡检,为您最高分担60%以上的运维工作.提供CPU利用率、IOPS、连接、磁盘空间等实例信息实时监控及报警,随时随地了解实例动态.自动化的...
来自: 云产品
数据传输服务DTS
阿里云数据传输服务集数据迁移、订阅及实时同步功能于一体,能够解决公共云、混合云场景下,远距离、毫秒级异步数据传输难题,支持关系型数据库、NoSQL、大数据(OLAP)等数据源,其底层基础设施采用阿里双11异地多活架构,为数千下游应用提供实时数据流,已在线上稳定运行7年之久。
推荐搭配产品 云服务器ECS 云数据库RDS MySQL版客户案例产品动态查看全部日志视频教程配置数据迁移任务 助力用户实现平滑快速的迁移上云 配置数据同步作业 轻松支持异地灾备、异地多活及数据实时分析等应用场景 配置数据订阅通道 获取数据库的实时增量数据更多产品与服务云数据库 RDS SQL Server 版 RDS SQL Server 是阿里...
来自: 云产品
< 1 2 3 4 ... 28 >
共有28页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用