EMR本地盘实例大规模数据集测试
场景描述 阿里云为了满足大数据场景下的存储需求,在云 上推出了本地盘D1机型,这个系列提供了本地 盘而非云盘作为存储,提高了磁盘的吞吐能力, 发挥Hadoop的就近计算优势。阿里云EMR 产品针对本地盘机型,推出了一整套的自动化运 维方案,帮助用户方便可靠地使用本地盘机型, 不需要关注整个运维过程同时数据的高可靠和 服务的高可用。 解决问题 1.云盘多份冗余数据导致成本高 2.磁盘吞吐量不高 3.节点的高可靠分布问题 4.本地盘与节点的故障监控问题 5.数据迁移时自动决策问题 6.自动故障节点迁移与数据平衡问题 产品列表 EMR(E-MapReduce) 本地盘 VPC
set tez.am.resource.memory.mb=4096;set hive.tez.container.size=4096;set mapreduce.job.counters.max=2000;set hive.default.fileformat.managed=orc;文档版本:20191111(发布日期)20 EMR本地盘实例大规模数据集测试最佳实践 性能测试 步骤5 复制配置文件到/root/hive-testbench目录下 cp testbench.settings/root/...
来自: 最佳实践 相关产品:块存储,云服务器ECS,E-MapReduce
CDH迁移升级CDP最佳实践
CDH迁移升级CDP最佳实践
当前 CDH 免费版停止下载,终止服务,针对需要企业版服务能力并且CDH 升级过程对业务影响较小的客户,通过安装新的 CDP 集群,将现有数据拷贝至新集群,然后将新集群切换为生产集群,升级过程没有数据丢失风险,停机时间较短,适合大部分互联网客户升级使用。
CDH迁移升级 CDP 最佳实践 业务架构 场景描述 解决的问题 CDH升级至 CDP 当前 CDH免费版停止下载,终止服务,针对需要企业版 服务能力并且 CDH升级过程对业务影响较小的客户,通 要求升级过程无数据丢失风险 过安装新的 CDP集群,将现有数据拷贝至新集群,然后 要求升级宕时间及短 将新集群切换为生产集群,升级过程没有...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云速搭
自建Hadoop迁移MaxCompute
自建Hadoop迁移MaxCompute
场景描述 客户基于ECS、IDC自建或在友商云平台自建了大数 据集群,为了降低企业大数据计算平台的成本,提高 大数据应用开发效率,更有效保障数据安全,把大数 据集群的数据、作业、调度任务以及业务数据库整体 迁移到MaxCompute和其他云产品。 解决的问题 自建Hadoop集群搬迁到MaxCompute 自建Hbase集群搬迁到云Hbase 自建Kafka或应用数据准实时同步到 MaxCompute 自建Azkaban任务迁移到Dataworks任务 产品列表 MaxCompute,Dataworks、云数据库Hbase版、Datahub、VPC,ECS。
(也可以使用 CADT官方模版快速创建:https://bpstudio.console.aliyun.com/#/bpStudio/topo?TemplateId=3D28DEY1AM KTG2RQ)步骤3 参考下表,配置相关参数,并单击保存,然后部署应用。网络和交换机 类别 配置项 说明 专有网络 名称 客户 IDC-VPC IPv4网段 推荐网段 192.168.0.0/16 交换机 名称 vswitch-az-g 可用区 上海 ...
来自: 最佳实践 | 相关产品:云服务器ECS,DataWorks,大数据计算服务 MaxCompute,云数据库 HBase 版,数据总线,云速搭
在线教育流量洪峰
在线教育流量洪峰
1. 通过Tair缓存的性能增强型解决高并发读的性能问题,通过持久内存型解决大并发写性能及数据可靠性问题。 2. PolarDB作为主数据库保存业务的交易数据,通过弹性能力和并发SQL解决性能瓶颈。 3. ADB+QuickBI提供的数据仓库方案通过分时弹性能力和实时业务展现能力。
source.bash_profile cd YCSB mvn-pl site.ycsb:redis-binding-am clean package 7.5.TPC-H安装 步骤1 下载 TPC-H。访问网页,注册并通过 E-mail发送的 URL下载软件 http://www.tpc.org/tpc_documents_current_versions/download_programs/tools- download-request5.asp?bm_type=TPC-H&bm_vers=2.18.0&mode=CURRENT-ONLY ...
来自: 最佳实践 | 相关产品:云数据库 Redis 版,云数据库PolarDB,云原生数据仓库AnalyticDB My,Quick BI
数据库异地灾备
数据库异地灾备
场景描述 适用于不满足于单地域,对数据可靠性 (RPO)和服务可用性(RTO)要求更高 的,希望防范断电、断网等机房故障,抵 御地震、台风等自然灾害,具备异地容灾 备份恢复能力的客户业务场景。 解决问题 1.实时备份,RPO达到秒级 2.表级恢复,故障恢复时间大大缩短 3.长期归档,自动管理备份生命周期 4.异地灾备,构建数据库灾备中心 产品列表 专有网络VPC 云服务器ECS 弹性公网IP(EIP) 负载均衡SLB 云数据库RDSMySQL 数据库备份服务DBS 对象存储服务OSS 数据湖分析服务DLA 数据管理服务DMS 数据传输服务DTS
rm-wp_admin(CADT模板中配置)uf6am1mo89p3fd4jl.mysql.rds.aliyuncs.com 文档版本:20220207 15 数据库异地灾备 配置生产中心环境 2.配置生产中心环境 2.1.配置云数据库 RDS 步骤1 从 CADT登录 RDS深圳生产实例控制台。点击“前往控制台”进入 rds-深圳生产 实例详情页。步骤2 点击 数据库管理→创建数据库 文档版本:...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,对象存储 OSS,数据管理,数据湖分析,数据库备份DBS,云速搭CADT
主机安全
阿里云主机安全是一个实时识别、预警安全威胁的服务器安全管理系统,通过漏洞扫描、病毒查杀、防篡改、防勒索等安全检测能力,助您实现多云主机自动化安全运营
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台主机安全产品简介产品优势产品功能产品选型入门与试用技术解决方案产品定价安全合规常见问题社区主机安全主机安全为多云主机和线下IDC提供威胁检测、响应、溯源和自动化安全运营闭环能力。立即购买免费试用快捷入口控制台文档API价格计算器...
来自: 云产品
云虚拟主机
阿里云弹性计算为客户提供快速、稳定且安全的云虚拟主机服务,具备99.999%数据可靠性、BGP8线接入、千兆共享带宽,免费快速备案等产品优势;中国虚拟主机服务开创者!
具备DDoS基础防护能力,若发现危险文件,将会为您发送安全通知(部分机型支持).99.999%数据可靠性,网站自动宕迁移,数据自动、手动备份可选.网站和数据更稳定可靠.低至0.56元/天,产品性能持续提升,不断降低您的建站成本.建网站成本更低.8线BGP骨干网络,可一键切换至其它机房,配备独立IP,网站更易被收录.网站速度更...
来自: 云产品
专有宿主机DDH
专有宿主机提供基于阿里云虚拟化托管、物理主机独享的单租户环境、通过独享硬件资源方式可以满足安全、合规、自定义部署、自带许可证(BYOL)需求,在专有宿主机上可以创建多种规格的ECS实例,继承了ECS实例的规格选择灵活、性能稳定的优点和特性。
当物理时,系统会自动在库存中选择一台新机器,将原宿主机上的ECS实例全部迁移至新的宿主机,无需您准备备.基于公共云的高标准的机房建设、大规模运维预测能力和体系化的稳定性保障,提供端到端的服务可用性保障,解决私有化部署的常见的稳定性问题。专有宿主机提供和ECS相同的SLA.多重故障规避能力,保障业务连续...
来自: 云产品
OpenAPI实现云主机闪电交付
OpenAPI实现云<em>主机</em>闪电交付
闪电交付最佳实践使用Alibaba Cloud Linux 2 镜像来快速创建大量的ECS云主机,满足客户在处理热点事件时大量且紧急的算力需求。 本实践针对在短暂时间内需要快速交付大量ECS实例的场景。通过调用阿里云Open API实现快速的跨VPC部署大量ECS实例,满足用户对高弹性算力的需求,而且ECS启动的时间很短。对于社交媒体,在线教育等存在线上热点活动的用户,该方案可以提高客户的使用体验
OpenAPI实现云主机闪电交付 最佳实践 业务架构 场景描述 闪电交付最佳实践使用 Alibaba Cloud Linux 2 镜像来快速创建大量的 ECS云主机,满足客户 在处理热点事件时大量且紧急的算力需求。解决问题 快速创建大量的云服务器实例,满足客户对紧 急的算力需求。产品列表 云服务器 ECS Alibaba Cloud Linux 2 最佳实践频道 阿里...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,OpenAPI,Alibaba Cloud Linux ,云速搭CADT
基于DDH+MyBase降本合规
基于DDH+MyBase降本合规
出版、金融、保险等传统行业一方面希望能借助云计算以更好地适应业务发展需求(政策上云),另一方面出于对降低单实例部署成本(CPU 超分超配)以及满足更严格合规和监管要求的考虑,希望能对云上资源有更多的自主控制权(监管合规)。从业务系统架构云上部署的角度,基于专有宿主机DDH 和云数据库专属集群MyBase 的解决方案,可以很好地满足这两方面的需求。 解决问题: 1. 国家政策上云趋势和需求 2. 更严格的云上安全合规要求 3. 对云上资源有更灵活的管控权 4. 有效降低企业上云的整体拥有成本(TCO) 方案优势: 1、单租户隔离 DDH和 MyBase都可以提供宿主机级别物理隔离,可以独占资源,可以开放更多接口 , 同时杜绝 多租户间 干扰 。 2、安全合规:在完备的隔离基础之上,开放更多数据库权限和 OS权限 。 3、资源灵活部署和调度 创建 ECS实例、从共享宿主机迁移 ECS实例至专有宿主机或在专有宿主机之间迁移 ECS实例时,若您不指定专有宿主机,系统将自动帮您选择专有宿主机部署实例。 针对于初始部署数据库实例时,提 供紧凑型和均衡型两种方式将数据库实例分不到不同的主机上。 4、超配 降本 DDH和 MyBase组合的方式可以实现资源自定义 CPU内存 配比以及CPU超分 ,可以降低单 ECS实例以及云数据库实例的部署成本。
超分型 DDH上部署 ECS 专有宿主机 DDH(Dedicated Host,简称 DDH)是指由一个租户独享物理资源的云 。作为该云主机的唯一租户,您不需要与其他租户共享云主机所有物理资源。您还 可以获得这台物理服务器的物理属性信息,包括 CPU数量(Socket数)、物理 CPU 核数、内存大小,并根据宿主机规格创建指定规格族的 ECS实例...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,负载均衡 SLB,弹性公网IP,专有宿主机,云数据库专属集群MyBase,云速搭
虚拟桌面架构的高性能体验云上部署
虚拟桌面架构的高性能体验云上部署
场景描述 针对自建虚拟化桌面架构迁移阿里云,以及有虚拟化桌面 架构需求上云。包括但不限于: 1.有许可证合规要求,利用自带license快速上云的客户。 2.对数据安全较高要求,需要快速构建虚拟化桌面的客 户。 解决问题 利用云上灵活性和规模化优势,构建云上更加高效、高性 能体验的服务,为客户解决: 1.客户VDI部署的需求,能够更及时的得到满足。 2.解决硬件资源限制,根据业务规模化部署并集中管 控。 3.利用公共云的网络、计算、备份容灾方案、安全防护 等,提供高可靠、高性能、高体验的远程桌面服务。 产品列表 VPC(专有网络) SLB(负载均衡) CEN(云企业网) 专有宿主机 OpenAPI
虚拟桌面架构的高性能体验云上部署 最佳...带有本地盘的专有宿主机(如本地 SSD型)不支持自动宕迁移。DDH发生故障停 后,您需要提交工单申请置换一台健康的 DDH。10 企业上云实践 虚拟桌面架构的高性能体验云上部署|DDH中创建弹性实例 3.DDH中创建弹性实例 创建 ECS实例(Windows镜像)登录阿里云专有宿主机管理控制台。...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,负载均衡 SLB,云企业网,专有宿主机
DDH集群运维管理
DDH集群运维管理
场景描述 当前许多企业的IDC业务场景,资源管理 等使用习惯与公共云不同,使用DDH集群 管理,继承IDC虚拟化使用习惯,比如自 定义ECS规格。同时针对CPU负载较低 的场景,通过CPU超分,可以有效提高资 源利用率,节省整体成本。并且可以通过账 号授权业务团队,结合云监控资源使用率, 方便业务使用的同时又能有效遏制资源浪 费。 方案优势 1.使用专有宿主机集群构建云上环境,通 过超分提高资源利用率,降低企业成 本。 2.通过访问控制授权,云监控资源,完成 专有宿主机集群运维管理使用闭环。 产品列表 访问控制RAM 专有网络VPC 云服务器ECS 云监控CloudMonitor
适用场景  针对CPU负载较低的场景,尤其是传统IDC企业客户有降本诉求,使用专有宿 主机集群构建云上环境,通过超分提高资源利用率, 需要沿用传统IDC资源管理方式,通过访问控制授权,云监控资源,完成专有宿 主机集群运维管理使用闭环。技术架构 本实践方案主要操作步骤:1.根据规划创建VPC网络环境,根据规划创建DDH...
来自: 最佳实践 | 相关产品:专有网络 VPC,访问控制,云监控,专有宿主机
VMware迁移DDH
VMware迁移DDH
场景描述 介绍本地部署或托管在IDC环境的VMware系统迁移 上云至独立宿主机(DDH)的最佳实践。使用DDH在 云端构建由独享物理服务器组成的资源池,同时配合 ECS成熟稳定的虚拟化技术体系,充分利用云上资源 弹性、按使用付费的优势,快速构建高性能、高可靠 和可快速动态伸缩的虚拟化系统,满足安全、合规、 自定义部署、自带许可证(BYOL)等企业级需求。 解决问题 l云端独享高性能、高可靠、高弹性的物理服务器资源池。 l基于成熟云原生虚拟化技术体系,支持ECS自定义部 署,可在DDH环境和多租户环境间迁移。 l支持自带许可证(BYOL)。 产品列表 l访问控制RAM l专有网络VPC l云服务器ECS l对象存储OSS l专有宿主机DDH l资源编排ROS
文档版本:20200218 43 企业上云实践 VMware 迁移 DDH|DDH 上使用导入镜像部署 ECS 实例 4.DDH 上使用导入镜像部署 ECS 实例 确认 2.9 章节的自定义镜像导入完成后,在已创建的专有宿主上使用自定义镜像创建 ECS 实例。以下示例以 VPC 实例 vpc_sh 为生产环境 VPC,将 web 服务器部署至 DDH1,将 app 服务 器部署至 DDH2...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,访问控制,专有宿主机
Openstack迁移DDH
Openstack迁移DDH
场景描述 在线下IDC中,很多用户使用OpenStack构建云环境,本 文介绍如何将线下IDC中基于OpenStack构建的云服务器 迁移到阿里云专有宿主机(DDH)上,从而实现业务平滑 上云的同时,显著降低成本。 解决问题 1.如何将OpenStack中的云服务器迁移 DDH上。 2.如何使用DDH构建云上环境。 产品列表 专有宿主机DDH 对象存储OSS 服务器迁移中心SMC 专有网络VPC
如何将OpenStack中的云服务器迁移 迁移到阿里云专有宿主机(DDH)上,从而实现业务平滑 DDH上。上云的同时,显著降低成本。2.如何使用DDH构建云上环境。产品列表  专有宿主机DDH  对象存储OSS  服务器迁移中心SMC  专有网络VPC 云服务器ECS(产品名称)文档模板(手册名称)/文档版本信息 阿里云 企业上云实践 ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,专有宿主机
< 1 2 >
共有2页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用