自建Hive数仓迁移到阿里EMR
自建Hive数仓迁移到阿里<em>云</em>EMR
场景描述 客户在IDC或者公有云环境自建Hadoop集群构 建数据仓库和分析系统,购买阿里云EMR集群之 后,涉及到将数据仓库和Hive元数据的数据库迁 移上云。目前主流Hive数据仓库迁移场景为1.x 版本迁移到阿里云EMR(Hive2.x版本),涉及到 数据订正更新步骤。 解决的问题 Hive数据仓库的数据迁移方案 Hive元数据库的迁移方案 Hive跨版本迁移后的数据订正 产品列表 E-MapReduce,VPC,ECS,OSS,VPN网关。
Use the Home tab to apply 云服务器 ECS(产品名称)标题 to the text that you want to appear here.文档版本:20210721 阿里云 自建 Hive数据仓库 跨版本迁移到阿里云 EMR 文档版本:20150122(发布日期)III 自建Hive数据仓库跨版本迁移到阿里云 EMR 文档版本信息 文档版本信息 文本信息 属性 内容 文档名称 自建 Hive...
来自: 最佳实践 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,E-MapReduce,云速搭
DBS通过IPSec VPN备份自建数据库
DBS通过IPSec VPN备份自建数据库
场景描述 客户业务系统部署在IDC或者公有云环境,对业 务数据有云上备份需求。在客户交流过程中,基 于数据高可用和灾备需求,要求将数据备份至阿 里云OSS的存储空间,同时备份数据流基于 IPSecVPN/专线进行安全传输。 解决的问题 自建数据库的云上/跨云备份需求 DBS提供了完善的备份机制和API OSS的分层存储机制降低备份集储存成本 基于IPSecVPN/专线进行安全传输。 产品列表 VPC,ECS,DBS,VPN网关,OSS
Use the Home tab to apply 云服务器 ECS(产品名称)标题 to the text that you want to appear here.阿里云 DBS通过 IPSec VPN 备份自建数据库 文档版本:20150122(发布日期)II DBS通过 IPSec VPN备份自建数据库 文档版本信息 文档版本信息 文本信息 属性 内容 文档名称 DBS通过 IPSec VPN备份自建数据库 文档编号 093 ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,数据库备份DBS,云速搭
中小企业CDH集群上云升级CDP解决方案
中小企业 CDH 集群上云升级 CDP 解决方案,助力原 CDH/HDP 的用户快捷升级到企业级 CDP 环境,并链接阿里云相关产品服务。同时,基于阿里云便捷的基础网络设施和云网络服务,能够快速构建云上云下互联的混合云架构。
云服务器ECS.对象存储OSS.边缘网络加速.中小企业CDH集群上云升级CDP解决方案.云服务器ECS.对象存储OSS.边缘网络加速.基于 Apache Kafka,构建高性能、高可用的流式消息平台,并集合流式场景的其他工具如 NiFi、Flink、Spark Streaming 等,统一通过 CDP 开展相关工作.流式消息处理.流式消息处理.准实时分析需要对变化中的...
来自: 解决方案
互联网、电商Elasticsearch搜索
互联网、电商Elasticsearch搜索
场景描述 每一个生活在互联网中的用户,每天都在经 历各种各样的“搜索”,查找电商网站商品、 信用卡账单、查电子发票、查附近的餐厅酒 店、查偶像、查交通等等。相对于传统的关 系型数据库,Elasticsearch只需要几毫秒的 时间,即可查询PB级数据并从中找到匹配 信息。利用Elasticsearch高可用性和易用 性,能够快速处理网站、APP丢给它的文本、 数字、日期、IP以及地理数据。 解决问题 1.电商网站商品、订单、物流等搜索 2.保险行业保单查询 3.互联网教育行业课程搜索 4.O2O行业地理位置搜索等 产品列表 云服务器ECS 专有网络VPC 负载均衡SLB 云数据库RDSMySQL版 Dataworks Elasticsearch 数据传输服务DTS
互联网教育行业课程搜索 产品列表 4.O2O行业地理位置搜索等 云服务器 ECS 专有网络 VPC 负载均衡 SLB 最佳实践频道 阿里云最佳实践分享群 云数据库 RDS MySQL版 Dataworks Elasticsearch 数据传输服务 DTS 云服务器 ECS(产品名称)文档模板(手册名称)/文档版本信息 阿里云 企业上云实践 互联网、电商 Elasticsearch搜索 ...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,数据传输,DataWorks,Elasticsearch
小型互联网迁移阿里
小型互联网迁移阿里<em>云</em>
场景描述 本方案主要适用于中小型互联网企业,从他云 迁移到阿里云的最佳实践。方案中会概述网络 规划、服务器、数据库、存储数据、Kafka和 镜像数据的迁移方案描述。同时在实践环节, 增加服务器和RDS的迁移操作演练和验证。 解决问题 提供服务器、数据库等关键环节的平滑迁移方 案 提供云上高可用架构参考 提供模拟简单的演练回归流程机制 产品列表 云服务器(ECS)、迁云工具(SMC)、数据库 (RDS)、数据库(Redis)、数据传输(DTS)、 负载均衡(SLB)、专有络(VPC)等
解决问题 提供服务器、数据库等关键环节的平滑迁移方案 提供云上高可用架构参考 提供模拟简单的演练回归流程机制 产品列表 云服务器ECS)服务器迁移中心(SMC)数据库(RDS)数据库(Redis)阿里云最佳实践分享群 最佳实践频道 数据传输(DTS)负载均衡(SLB)专有网络(VPC)阿里云 业务上云实践 小型互联网迁移阿里云 ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS
中小企业基于SAG APP实现上移动办公
中小企业基于SAG APP实现<em>云</em>上移动办公
1. 客户端一键接入上云,配置自动化 2. 城域内 Internet 就近接入,快速高效 3. 数据加密传输,满足安全性要求 4. 阿里云控制台统一配置管理
4.阿里云控制台统一配置管理 产品列表 云企业网 CEN 智能接入网关 SAG APP 云服务器 ECS 云解析 PrivateZone 最佳实践频道 阿里云最佳实践生态群 云服务器 ECS(产品名称)文档模板(手册名称)/文档版本信息 阿里云 中小企业基于SAG APP 实现云上移动办公最佳实践 文档版本:20211008(发布日期)文档版本:20150122(发布...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,云企业网,云解析 PrivateZone,智能接入网关,云速搭
生活物联网平台
阿里云IoT针对消费级智能设备领域的物联网平台,为解决设备快速智能化中常遇到的设备连接、App控制、设备消息推送、语音控制、设备管理、数据统计等问题,提供一整套配置化方案,大幅减低“设备-云端-App”的开发成本。
云服务器 ECS.推荐搭配使用.LinkVisual视频解决方案.提供设备标准固件和App标准面板,包含音乐律动算法、情景化变色、语音控制,免开发即可拥有丰富场景化智能效果.支持行业所有常用的照明全品类产品,包括光源类,灯具类,户外产品,氛围产品等.语音控制已成为主流功能,但对接各家语音平台耗时耗力;飞燕平台一键打通多家...
来自: 云产品
数据库备份DBS
数据库备份(Database Backup,简称DBS)是为数据库提供连续数据保护、低成本的备份服务。它可以为多种环境的数据提供强有力的保护,包括企业数据中心、其他云厂商、混合云及公共云。通过使用阿里实时数据流技术,实现数据库秒级备份,秒级恢复,保障数据安全。
支持MySQL、SQL Server、Oracle等数十种热门数据库一键备份,支持阿里云云数据库、阿里云ECS、本地数据中心、其他多种环境.丰富的产品矩阵,覆盖多种备份数据源和环境.秒级RTO/RPO.满足历史数据恢复、开发测试多版本数据构建等需求;全增合并,后台自动完成合并,降低任意时间点数据的恢复时间;秒级挂载,秒级完成快照...
来自: 云产品
基于MyBase构建自主可控数据库和高弹性应用实践
基于MyBase构建自主可控数据库和高弹性应用实践
一些企业级客户上云前,会重点关心数据库是否自主可控,包括云资源独享、自主可运维、获取OS 权限等特点,同时又要兼顾数据库合规性、安全性和高性能的要求;并力求在业务弹性下合理利用云产品降低数据和应用成本,弹性地支持业务。本实践为此类用户提供相关实践参考。
产品列表 云服务器 ECS 传统型负载均衡 SLB 最佳实践频道 阿里云最 佳实践分享群 弹性伸缩 Auto Scaling 云数据库专属集群 MyBase 堡垒机 云速搭 CADT 如二维码过期,请搜索群号:31852400 云服务器 ECS(产品名称)文档模板(手册名称)/文档版本信息 阿里云 企业上云实践 基于 MyBase构建 自主可控数据库和高弹性实践 ...
来自: 最佳实践 | 相关产品:负载均衡 SLB,堡垒机,弹性伸缩,云数据库专属集群MyBase,云速搭CADT
商超连锁全渠道零售解决方案​
阿里云商超连锁全渠道零售解决方案包括B2C、O2O、B2B的场景,提供APP/小程序,支持对接饿了么、美团等第三方外卖平台,基于阿里巴巴多年沉淀的业务中台技术,建立商品、会员、交易、营销等共享服务中心,实现全渠道数据的共享和一致,帮助零售商打造线上、线下无差别的全渠道销售能力。
有机衔接稳定的后台系统和灵活多变的前端业务场景,通过抽取后台系统的数据,以共享服务中心的方式,为前台的各种业务场景提供统一调用服务,保证数据...云服务器 ECS.是一个应用托管和微服务管理的PaaS平台.了解更多>.专注于解决单机关系型数据库扩展性问题.了解更多>.可支撑万亿级数据洪峰的分布式消息中间件.了解更多>.
来自: 解决方案
企业上云workshop
企业上云workshop
本文模拟了如下场景: 1. 线下 IDC 环境中部署了一个业务系统,业务是利用 wordpress 系统提供网站服务。 2. 本文详细介绍了如何将以上线下系统搬迁到云上, 包括如何在云上构建以上业务系统,如何迁移线下 系统到云上,如何割接。 3. 最后介绍了迁移上云后,如何部署安全系统。 解决问题 IDC 业务系统搬迁上云 云上构建业务系统 部署安全系统
解决问题 IDC业务系统搬迁上云 云上构建业务系统 部署安全系统 产品列表 最佳实践频道 阿里云最佳实践生态群 弹性公网 IP 负载均衡 SLB 专有网络 VPC 云服务器 ECS 对象存储 OSS 文件服务 NAS 云数据库 RDS 云数据库 PolarDB 云架构设计工具 CADT Web应用防火墙 SSL证书 云防火墙 云服务器 ECS(产品名称)文档模板(手册...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,负载均衡 SLB,弹性公网IP,文件存储NAS,云数据库PolarDB,Web应用防火墙,云防火墙,SSL证书,云速搭
数据库异地灾备
数据库异地灾备
场景描述 适用于不满足于单地域,对数据可靠性 (RPO)和服务可用性(RTO)要求更高 的,希望防范断电、断网等机房故障,抵 御地震、台风等自然灾害,具备异地容灾 备份恢复能力的客户业务场景。 解决问题 1.实时备份,RPO达到秒级 2.表级恢复,故障恢复时间大大缩短 3.长期归档,自动管理备份生命周期 4.异地灾备,构建数据库灾备中心 产品列表 专有网络VPC 云服务器ECS 弹性公网IP(EIP) 负载均衡SLB 云数据库RDSMySQL 数据库备份服务DBS 对象存储服务OSS 数据湖分析服务DLA 数据管理服务DMS 数据传输服务DTS
部署业务应用 一般实际业务应用场景会在单可用区部署多 ECS,利用 SLB,将访问流量根据转发 策略分发到后端多台云服务器ECS实例)上,以扩展应用的服务能力,增强应用的 可用性,避免单实例故障对业务造成影响。本操作实践作为指导作用,不模拟 SLB挂载多 ECS的场景。只用一直接挂载 EIP 的 ECS来提供应用服务。2.2...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,对象存储 OSS,数据管理,数据湖分析,数据库备份DBS,云速搭CADT
文件存储NAS
文件存储(Network Attached Storage,简称NAS),是阿里云对外提供的兼容POSXI接口的分布式文件存储,容量和处理能力的弹性扩展,按实际容量付费真正使您专注于核心业务。
云服务器 ECS.推荐搭配使用.高性能网站及WEB应用.场景描述及概要.随着业务快速增长,每天系统产生的log会不断增长,其中包含着大量有价值的信息。将数据保存在本地磁盘上,可能会打爆本地硬盘造成系统故障,需要将这些log方便、低成本并集中化的保存在NAS存储上.需要POSIX协议和共享读写能力,支持多应用和多系统便捷写入....
来自: 云产品
VMware on 弹性裸金属
VMware on 弹性裸金属
场景描述 传统企业将VMware迁移到阿里云弹性裸 金属,利用云计算平台提供的弹性基础设 施,降低部分运维成本和学习成本,使用其 擅长的技术工具专注自身业务,实现线下业 务平滑迁移上云。 解决问题 1.VMware业务平滑迁移上云 2.集成云产品能力增强业务创新 3.降低混合云成本和复杂度 4.增强系统可用性 产品列表 EBM神龙 ECS NAS OSS ENI NAT EIP
步骤2 通过产品与服务导航,定位到云服务器ECS,单击进入云服务器ECS控制台。步骤3 在实例页面,单击创建实例。步骤4 完成创建实例配置。具体配置描述见下表。注意:要通过按量付费方式开通弹性裸金属实例,需要联系产品PD为账号加白。类别 配置项 说明 基础配置 计费方式 按量付费 地域 华东2(上海)可用区E 实例规格 ecs...
来自: 最佳实践 | 相关产品:云服务器ECS,弹性公网IP,文件存储NAS,NAT网关,弹性裸金属服务器(神龙)
电商网站数据埋点及分析
电商网站数据埋点及分析
场景描述 数据埋点是数据产品经理、数据运营以及数据分 析师,基于业务需求(例如:CPC点击付费广 告中统计每一个广告位的点击次数),产品需求 (例如:推荐系统中推荐商品的曝光次数以及点 击的人数)对用户行为的每一个事件对应的位置 进行开发埋点,并通过SDK上报埋点的数据结 果,记录数据汇总后进行分析,推动产品优化或 指导运营。 解决问题 1.电商网站广告位效果统计分析 2.电网网站推荐商品曝光、点击、购买等行为统 计分析 3.电商网站用户分布分析 4.电商网站页面热点图分析等 产品列表 日志服务SLS Dataworks 云服务器ECS 云数据库RDS版 负载均衡SLB 专有网络VPC
电商网站页面热点图分析等 产品列表 最佳实践频道 阿里云最佳实践分享群 日志服务 SLS Dataworks 云服务器 ECS 云数据库 RDS版 负载均衡 SLB 专有网络 VPC 云速搭 CADT 云服务器 ECS(产品名称)文档模板(手册名称)/文档版本信息 阿里云 企业上云实践 电商网站数据埋点及分析 最佳实践 文档版本:20220127 文档版本:...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,日志服务(SLS),DataWorks,云速搭CADT
金融专属大数据workshop
金融专属大数据workshop
实践目标 学习搭建一个实时数据仓库,掌握数据采集、存储、计算、输出、展示等整个业务流程。 整个实时数据仓库系统全部基于阿里云产品进行架构搭建,用户可以掌握并学会运用各个服务组件及各个组件之间如何联动。 理解阿里云原生实时离线一体数仓解决方案架构以及掌握交付落地的实践使用方法。 前置知识要求 熟练掌握SQL语法 对大数据体系系统知识有一定的了解
详见https://www.aliyun.com/product/ram  ECS云服务器ECS(ElasticComputeService)是一种简单高效、处理能力可 弹性伸缩的计算服务。帮助您构建更稳定、安全的应用,提升运维效率,降低IT 成本,使您更专注于核心业务创新。详见:https://www.aliyun.com/product/ecs  DataHub:数据总线(DataHub)服务是阿里云提供...
来自: 最佳实践 | 相关产品:块存储,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,弹性公网IP,数据传输,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,实时计算,数据总线,Quick BI,Hologres
金融分布式架构SOFAStack
阿里云金融分布式架构SOFAStack为金融用户提供全栈式的基础架构能力,是集项目管理、微服务开发、发布部署、监控运维、容灾高可用等全栈式解决方案,助力客户应用轻松转型分布式架构,保证风险安全的同时帮助业务需求敏捷迭代,支撑金融业务创新,开发人员学习成本最多可降低92%、应用开发效率可最多提升80%、运维人力成本最多可节省90%
云服务器ECS.负载均衡SLB.推荐搭配使用.互联网金融中.以强大的业务中为支撑,支持产品快速组合创新.蚂蚁金服自主研发的金融级分布式架构平台,专注为金融用户提供全栈式的基础架构能力 保证风险安全的同时帮助业务需求敏捷迭代,同时满足异地容灾、低成本快速扩容的需求 解决传统集中式架构转型的困难,打造大规模高...
来自: 云产品
自建Hive数据仓库跨版本迁移到阿里Databricks数据洞察
自建Hive数据仓库跨版本迁移到阿里<em>云</em>Databricks数据洞察
场景描述 客户在IDC或者公有云环境自建Hadoop集群构建数据仓库和分析系统,购买阿里云Databricks数据洞察集群之后,涉及到数仓数据和元数据的迁移以及Hive版本的订正更新。 方案优势 1. 全托管Spark集群免运维,节省人力成本。 2. Databricks数据洞察与阿里云其他产品(OSS、RDS、MaxCompute、EMR)进行深度整合,支持以这些产品为数据源的输入和输出。 3. 使用Databricks Runtime商业版引擎相比开源Spark性能有3-5倍的提升。 解决问题 1. Hive数仓数据迁移OSS方案。 2. Hive元数据库迁移阿里云RDS方案。 3. Hive跨版本迁移到Databricks数据洞察使用Delta表查询以提高查询效率。
阿里云最佳实践分享群 最佳实践频道 如二维码过期,请搜索群号:31852400 云服务器 ECS(产品名称)文档模板(手册名称)/文档版本信息 阿里云 自建Hive 数据仓库跨版本迁移到 阿里云Databricks数据洞察 文档版本:20210425(发布日期)文档版本:20210425 1 自建 Hive数据仓库跨版本迁移到阿里云 Databricks数据洞察 文档...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,文件存储HDFS,spark
企业建站场景解决方案
企业建站场景解决方案从客户需求角度梳理阿里云平台化且有竞争力的建站类产品,包含企业规模、建站形式、产品、业务方向、部署形式、安全合规、解决方案等维度,帮助客户解决互联网立足、企业对外展示、引流、获客、营销、企业管理等业务需求。
阿里云心选建站量身打造的定制建站服务,云架构包括云服务器 ECS、云数据库 RDS、全站加速 CDN、云盾等基础产品,确保网站快速、安全、稳定,服务可用性达到99.9%,性能更出色.全面应用阿里云计算技术.低成本免开发.资深设计师1对1服务,熟练运用各种设计风格与交互体验,匠心打造。整个服务流程均在线完成,有效解决建站...
来自: 解决方案
基于DataWorks的大数据一站式开发及数据治理
基于DataWorks的大数据一站式开发及数据治理
概述 基于Dataworks做大数据一站式开发,包含数据实时采集到kafka通过实时计算对数据进行ETL写入HDFS,使用Hive进行数据分析。通过Dataworks进行数据治理,数据地图查看数据信息和血缘关系,数据质量监控异常和报警。 适用场景  日志采集、处理及分析  日志使用Flink实时写入HDFS  日志数据实时ETL  日志HIVE分析  基于dataworks一站式开发  数据治理 方案优势  大数据一站式开发,完善的数据治理能力。  性能优越:高吞吐,高扩展性。  安全稳定:Exactly-Once,故障自动恢复,资源隔离。  简单易用:SQL语言,在线开发,全面支持UDX。  功能强大:支持SQL进行实时及离线数据清洗、数据分析、数据同步、异构数据源计算等Data Lake相关功能 ,以及各种流式及静态数据源关联查询。
日志 HIVE分析 基于 DataWorks一站式开发 数据治理 产品列表 最佳实践频道 阿里云最佳实践技术分享群 实时计算、EMR EIP、VPC ECS DataWorks 云服务器 ECS(产品名称)文档模板(手册名称)/文档版本信息 阿里云 基于Dataworks的大数据 一站式开发及数据治理 最佳实践 文档版本:20210207 文档版本:20150122(发布日期)II...
来自: 最佳实践 | 相关产品:块存储,云服务器ECS,E-MapReduce,DataWorks,实时计算,云速搭
< 1 2 3 4 ... 8 >
共有8页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用