自建Hive数仓迁移到阿里EMR
自建Hive数仓迁移到阿里<em>云</em>EMR
场景描述 客户在IDC或者公有云环境自建Hadoop集群构 建数据仓库和分析系统,购买阿里云EMR集群之 后,涉及到将数据仓库和Hive元数据的数据库迁 移上云。目前主流Hive数据仓库迁移场景为1.x 版本迁移到阿里云EMR(Hive2.x版本),涉及到 数据订正更新步骤。 解决的问题 Hive数据仓库的数据迁移方案 Hive元数据库的迁移方案 Hive跨版本迁移后的数据订正 产品列表 E-MapReduce,VPC,ECS,OSS,VPN网关。
可靠性 使用阿里云数据库 RDS保存 Hive的元数据信息,可以提升数据可靠性和服务可 性,免除客户运维自建 MySQL数据库的工作。文档版本:20210721 2 自建Hive数据仓库跨版本迁移到阿里云 EMR 前置条件 前置条件 在进行本文操作之前,您需要完成以下准备工作:注册阿里云账号,并完成实名认证。您可以登录阿里云控制台,并...
来自: 最佳实践 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,E-MapReduce,云速搭
移动测试
阿里云移动测试(Mobile Testing)是为广大企业客户和移动开发者提供真机测试服务的云平台,拥有大量热门机型,提供7x24全天候App测试服务,帮助客户发现APP中的各类隐患(应用崩溃、各类兼容性问题、功能性问题、性能问题等),减少用户流失,提高APP质量和市场竞争力。
云数据库RDS MySQL .云数据库 Redis .推荐搭配使用.金融:混合应用场景.身份证自动上传、随机密码键盘识别.针对游戏测试难、验证难、场景多进行专项优化,提供高质量测试用例,进行性能瓶颈检测并提供解决方案,有效提升识别率,支持弱网验证.提供高质量测试用例,方便在大量真机进行批量回归验证.提供弱网场景的功能...
来自: 云产品
游戏行业多场景云数据库解决方案
阿里云的游戏行业数据库解决方案通过使用云数据库的产品组合,应对游戏行业多种细分场景,充分利用阿里云数据库高性能、低成本、高可用、易维护的优势,帮助游戏客户适应当前和未来业务发展的需要。
云数据库Redis.放眼全球市场,游戏产业收入增长迅速。在游戏的整个开发和运营周期,数据库的使用场景非常多。面对游戏访问压力、游戏合服场景、掉线问题、游戏排行榜和游戏买量优化场景,阿里云使用灵活组合的数据库产品,为游戏顺利上线运营和良好用户体验提供保障.游戏行业多场景云数据库解决方案.游戏推广期、新开服或...
来自: 解决方案
原生数据库
PolarDB是阿里云自研的云原生数据库,在存储计算分离架构下,利用了软硬件结合的优势,为用户提供秒级弹性、高性能、海量存储、安全可靠的数据库服务。100%兼容MySQL和PostgreSQL生态,支持分布式扩展,高度兼容Oracle语法。
云数据库RDS MySQL.数据传输DTS.云原生数据仓库ADB MySQL.推荐搭配产品.交通物流:每秒万级并发.在线业务超高并发,轻松解决.电商行业中如大型促销秒杀场景对系统整体访问压力巨大。PolarDB 分布式历经各届天猫双十一及阿里云各行业客户业务的考验,能有效解决热点数据的高并发更新性能瓶颈,助力业务稳定运行.通过Polar...
来自: 云产品
企业上云数据安全
企业上云数据安全
场景描述 企业是否选择上公共云,或者哪些系统或数据上 公共云,对数据安全的关心是重要因素之一。本 最佳实践重点在于介绍狭义的数据加密存储安 全范畴,即首先使用SDDP产品进行敏感数据发 现和分级分类,然后对高级别敏感数据进行按 需、不同类型的全链路加密存储。 解决问题 1.帮助客户发现敏感数据 2.对敏感数据进行分类、分级 3.对不同级别的数据如何选择加密方式 4.具体如何进行加密 产品列表 敏感数据识别SDDP 密钥管理服务KMS 云数据库RDS 对象存储OSS
具体如何进行加密 产品列表 敏感数据识别 SDDP 密钥管理服务 KMS 云数据库 RDS 对象存储 OSS 阿里云最佳实践分享群 最佳实践频道 如二维码过期,请搜索群号:31852400 文档版本信息 企业上云数据安全 阿里云 企业上云数据安全 最佳实践 文档版本:20150122(发布日期)II 文档版本信息 企业上云数据安全 文档版本信息 文本...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,密钥管理服务,敏感数据保护,云速搭CADT
专有宿主机DDH
专有宿主机提供基于阿里云虚拟化托管、物理主机独享的单租户环境、通过独享硬件资源方式可以满足安全、合规、自定义部署、自带许可证(BYOL)需求,在专有宿主机上可以创建多种规格的ECS实例,继承了ECS实例的规格选择灵活、性能稳定的优点和特性。
云数据库RDS.推荐搭配使用.成本优化型部署方案.提升资源利用率降低成本.基于灵活的规格配比形式,实现互联网业务更多样的架构部署需求。对于不同的业务负载采用不同的方案提升资源利用率。对于消费者(2C)业务采用CPU锁定技术保证高负载情况下的性能稳定,对于内部系统和开发测试环境采用CPU超分技术降低成本.独享物理机的...
来自: 云产品
云数据库MongoDB
阿里云云数据库MongoDB版是完全兼容MongoDB协议、高度兼容DynamoDB协议的在线文档型数据库服务。支持单节点、双节点、副本集和分片集群四种部署架构,能够满足不同的业务场景需要。
云数据库 RDS MySQL .RDS SQL Server 是阿里云基于微软正版授权的SQL Server提供的稳定可靠、可弹性伸缩的在线数据库服务,可以无缝适配企业自研或采购软件的数据库直接部署运行.云数据库 RDS SQL Server .高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求.云数据库 Redis ....
来自: 云产品
专有企业
阿里云专有云企业版是面向政企客户的全栈云平台,可一键式弹性扩展至公共云,提供不同应用场景需求下的混合云方案,支撑企业级核心应用平滑上云。
关系型数据库RDS,主备实例高可用,支持跨可用区与跨地域部署,三节点架构保证RPO=0;关系型数据库PolarDB-O,提供ADAM迁移评估工具,存储计算分离架构,为用户提供具备极致弹性、高性能、海量存储、安全可靠的数据库服务.通用关系型数据库场景.分布式关系数据库PolarDB-X,解决并发性能瓶颈问题,分布式SQL引擎、弹性平滑...
来自: 云产品
虚拟配网调度员解决方案
虚拟配网调度员解决方案以智能运检技术发展规划为指导,强化配电运行过程管控,提升人机协同效率,以人工智能技术和现代通信技术为载体,全面应用智能化技术和装备。通过智能配网智慧生产指挥AI应用建设,利用机器智能代替大量不必要的人工重复劳动,有效发挥电网指挥的作用,提升企业整体运营效率。
服务器ECS承接综合能源服务业务应用,RDS实现结构化数据的存储与服务,SLB提供负载均衡服务.不仅保证应用安全,还能免提供应用的安全评估及安全加固服务.云盾和监控.明确终端客户的需求与电力行业解决方案描述一致.提交合作咨询.向阿里提交合作意向,描述终端客户的相关背景和业务痛点.阿里只做Paas层,我们的产品...
来自: 解决方案
企业办公安全访问一体化
企业办公安全访问一体化
本场景模拟企业办公环境,基于 CSAS 服务构 建企业办公安全一体化方案,将“安全 + 网络” 能力无缝融合,实现了对云下办公终端安全的统 一管理,企业无需在投资复杂且昂贵的传统硬件 安全设备,即可快速构建安全、可靠、低成本的 办公安全防护体系。 1. 企业办公环境访问互联网的安全管理 2. 企业办公环境访问内网服务的安全管理 3. 企业办公网络、安全一体化管理
企业办公网络、安全一体化管理 最佳实践频道 阿里云最佳实践技术分享群 产品列表  云安全访问服务CSAS  云服务器ECS  专有网络VPC  云数据库RDS  对象存储OSS云服务器ECS(产品名称)文档模板(手册名称)/阿里云 企业上云实践 企业办公安全一体化访问 最佳实践 文档版本:20210129 文档版本:20150122(发布日期...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云安全访问服务
原生
阿里云拥有丰富的云原生产品家族,全面的云原生开源贡献,大规模的云原生应用实践,以及广泛的云原生客户群体,为企业数字创新提供全方位能力支撑。
数据可视化平台Grafana服务全托管免运维,默认集成数据库RDS、消息队列MQ、实时计算Elasticsearch、Prometheus监控、日志服务SLS等数据源,并提供丰富数据看板模板,让数据可视化更加高效、精细.Grafana 服务.为分布式应用的开发者提供了完整的调用链路还原、调用请求量统计、链路拓扑、应用依赖分析等工具.链路追踪(公测...
来自: 云产品
基于HBR上统一备份
基于HBR<em>云</em>上统一备份
场景描述 混合云备份(简称HBR)是一种简单易用且高性价 比的在线备份服务,可以为阿里云ECS,NAS,OSS 以及自建机房内的各类数据提供安全,高效的保护。 本文介绍如何通过HBR对云上数据进行统一备份管 理。 解决问题 1.备份阿里云云上数据。 2.备份数据中心数据。 适用云资源 ECS文件系统 NAS文件 OSS文件 ECS上自建的MySQL、Oracle、SQLServer数据库 ESC上自建的SAPHANA数据库 产品列表 1.HBR备份服务 2.云服务器ECS 3.文件系统NAS 4.对象存储OSS 云上统一备份 云下统一备份 上云备份 备份上云
产品列表 适用资源 混合备份 HBR ECS文件系统 服务器 ECS NAS文件 文件系统 NAS OSS文件 对象存储 OSS ECS上自建的 SQL Server数据库 ECS上自建的 My SQL 数据库 ECS上自建的 Oracle 数据库 ECS上自建的 SAP HANA数据库 阿里最佳实践技术分享群 最佳实践频道 服务器 ECS(产品名称)文档模板(手册名称)/文档...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,文件存储NAS,混合云备份,云速搭
数据湖-在线学习场景数据分析
数据湖-在线学习场景数据分析
场景描述 本场景以在线教育中一个答题闯关类的应用为 例,使用WebServer来模拟演示这类日志数据 的分析处理。通过Nginx和Pythonflask搭建 WebServer,模拟应用中的关键页面,比如登 录、课程内容等,之后构造若干用户使用的模拟 日志数据,投递到数据湖进行分析后获取应用 PV、UV、课程内容访问排行、平均得分等等。 解决问题 基于数据湖(EMR+OSS)搭建大数据平台。 EMR和OSS使用和配置。 数据统一存储到OSS。 产品列表 E-MapReduce 对象存储OSS 云服务器ECS 访问控制RAM 专有网络VPC
您可以在自己创建的专有网络内创 建和管理产品实例,比如ECS、负载均衡、RDS等。在部署资源前,您需要 结合具体业务,规划VPC和交换机的数量及网段等。更多信息,请参见:www.aliyun.com/product/vpc  访问控制RAM:RAM使您能够安全地集中管理对阿里服务和资源的访问。您 可以使用 RAM 创建和管理用户和组,并使用...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,访问控制,E-MapReduce
混合存储构建VMware虚拟化平台
混合<em>云</em>存储构建VMware虚拟化平台
场景描述 本文以混合云存储阵列SA2600系统为例,介绍如 何在混合云存储环境下部署VMware虚拟化平台, 以及混合云环境下虚拟机的部署、扩容、云备份等功 能演示。 解决问题 1.如何使用混合云存储部署VMware虚拟化平台。 2.存储阵列在混合云环境下的使用,比如虚拟机部 署、扩容、云备份等。 产品列表 1.混合云存储阵列 2.对象存储OSS
混合存储构建VMware虚拟化平台 最佳实践 业务架构图 场景描述 本文以混合存储阵列SA2600系统为例,介绍如 何在混合存储环境下部署VMware虚拟化平台,以及混合环境下虚拟机的部署、扩容、备份等功 能演示。解决问题 如有问题请使用钉钉扫码联系文档作者:1.如何使用混合存储部署VMware虚拟化平台。2.存储阵列在...
来自: 最佳实践 | 相关产品:专有网络 VPC,对象存储 OSS,访问控制,混合云存储阵列 Hybrid Cloud
MaxCompute湖仓一体方案
MaxCompute湖仓一体方案
场景描述 自建数据湖与云数仓的融合解决方案,将 MaxCompute与自建的Hive集群做数据打 通,通过存储共享,元数据镜像等方式,解 决传统模式下的存储冗余,计算资源弹性能 力弱的痛点。可大幅度增强系统的资源弹 性,解决业务高峰期计算资源不足的问题。 方案优势 1.业务无侵入性:现有业务无需改造。 2.性能优化:MaxCompute在SQL上做 了大量优化与能力沉淀,可提高SQL 运行性能,降低计算成本。 3.灵活管理:元数据实时同步,无需额外 管理数据同步任务。 4.资源弹性:利用MaxCompute计算池 弹性进行海量数据计算。 解决问题 1.增强业务高峰期的资源弹性。 2.优化自建数据湖的数据治理能力。 3.减少跨平台数据处理的存储冗余。 产品列表 专有网络VPC 云服务器ECS 访问控制RAM 运维编排OOS MaxCompute(原ODPS) 云企业网CEN
更新 CADT模板,文档优化 文档版本:20220402 I MaxCompute湖仓一体方案 产品介绍 产品介绍 VPC:专有网络 VPC(Virtual Private Cloud)是用户基于阿里创建的自定义私 有网络,不同的专有网络之间二层逻辑隔离,用户可以在自己创建的专有网络内创 建和管理产品实例,比如 ECS、负载均衡、RDS 等。更多信息,请参见:...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云企业网,E-MapReduce,大数据计算服务 MaxCompute,运维编排,云速搭
金融智能数仓解决方案
金融智能数仓解决方案是阿里云自研高性能、海量可扩展数据仓库服务、兼容部分 Oracle/Teradata 语法生态,大量应用于阿里巴巴集团内部电商,物流,文娱,广告等业务部门,服务于阿里云的金融、政企、互联网等各行业用户,支持快速构建新一代云化数据仓库服务。
兼容 Greenplum/PostgreSQL 数据库产品生态,可集成数据智能与构建 Dataphin、数据管理 DMS、数据传输 DTS、数据报表 QuikBI 等产品,同时支持第三方数据开发管理、ETL、BI 报表等工具,满足用户多种业务需求.结合阿里巴巴多年内部应用和数据库的迁移经验,自主研发的应用和数据迁移评估工具 ADAM,能帮助用户最大限度...
来自: 解决方案
数字工厂
阿里云工业互联网平台全面助力制造企业数字化转型,打造工厂内、供应链、产业平台全面协同的新基建。 将工厂的设备、产线、产品、供应链、客户紧密地连接协同起来, 为企业提供可靠的基础平台和上层丰富的工业应用,结合全面的产业支撑,助力企业完成数字化转型。
高可用,高安全的云数据库.跨数据库查询为不同环境下的在线、异构数据源,提供及时的关联查询服务。不论数据库是MySQL、SQLServer、PostgreSQL还是Redis,不论数据库实例部署在哪个region哪个环境,通过一条SQL就能实现这些数据库实例之间的关联查询.通用:DMS跨数据库查询.各种关联查询.工业行业解决方案.把工厂的设备、产...
来自: 云产品
便携智能语音一体机
便携智能一体机由达摩院结合应用场景现有问题和用户实际需求,由智能语音识别技术+智能采集阵列硬件+先进的音频处理算法组成。 打破传统场景记录方案,完美解决记录速度慢、记录不完整、速记成本高的问题。具备会后记录实时成稿,参会人无感使用,无需布线等特点,让用户使用更加轻松,记录效率更高
高可用,高安全的云数据库.跨数据库查询为不同环境下的在线、异构数据源,提供及时的关联查询服务。不论数据库是MySQL、SQLServer、PostgreSQL还是Redis,不论数据库实例部署在哪个region哪个环境,通过一条SQL就能实现这些数据库实例之间的关联查询.通用:DMS跨数据库查询.各种关联查询.标题点击能跳转.支持上传业务材料...
来自: 云产品
办公安全平台SASE
阿里云办公安全平台(Security Access Service Edge)依托阿里云海量的边缘节点,将安全能力延伸至用户边缘,为企业分支机构/门店、远程移动办公场景的访问互联网及云上服务流量提供就近接入的安全防护能力。
高可用,高安全的云数据库.跨数据库查询为不同环境下的在线、异构数据源,提供及时的关联查询服务。不论数据库是MySQL、SQLServer、PostgreSQL还是Redis,不论数据库实例部署在哪个region哪个环境,通过一条SQL就能实现这些数据库实例之间的关联查询.通用:DMS跨数据库查询.各种关联查询.办公安全实战场景.<查看全部产品....
来自: 云产品
< 1 2 3 4 ... 6 >
共有6页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用