自建Hadoop迁移到阿里云EMR
自建Hadoop迁移到阿里云EMR
场景描述 场景1:自建Hadoop集群数据(HDFS)迁移到 阿里云EMR集群的HDFS文件系统; 场景2:自建Hadoop集群数据(HDFS)迁移到 计算存储分离架构的阿里云EMR集群,以OSS 和JindoFS作为EMR集群的后端存储。 解决的问题 客户自建Hadoop迁移到阿里云EMR集群的 技术方案; 基于IPSecVPN隧道构建安全和低成本数据 传输链路 产品列表 E-MapReduce,VPC,ECS,OSS,VPN网关。
(若 Chrome浏览器提示隐私 安全无法访问,可换用 Safari/Edge浏览器尝试。文档版本:20210714 40 自建Hadoop数据迁移到阿里云 EMR 启动数据迁移任务 4.3.在 EMR集群的 master节点进行少量数据迁移 步骤1 通过 SSH登录到自建 Hadoop集群的 master节点,查看目前已经生成的文件和大 小。hadoop fs-du-h/usr/dfs/data/flume/...
来自: 最佳实践 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,E-MapReduce,云速搭
混合云自有K8S弹性使用ECI
混合云自有K8S弹性使用ECI
场景描述 本文介绍线下IDC与云端通过专线构建混合云架构,自有K8S利用虚拟节点弹性调用ECI承载业务高峰期资源需求的最佳实践。 解决问题 混合云环境下,自有K8S集群注册至ACK,实现云端纳管。纳管K8S集群部署Virtual Node,使集群具备ECI资源调度能力。在以上环境中部署Web及离线作业应用,并使用ECI资源作为弹性资源池满足业务波峰需求。 产品列表 云服务器ECS 云架构设计工具CADT 专有网络VPC 访问控制RAM 云企业网CEN 弹性容器实例ECI Nat网关NAT 容器镜像服务ACR 负载均衡SLB 容器服务Kubernetes版ACK 弹性公网IPEIP
操作步骤 步骤1 浏览器直接访问 SLB EIP地址,发现显示的是 Nginx的欢迎页面。文档版本:20210520 59 混合云 IDC自有 K8S弹性使用 ECI ECI使用示例 原因是 Ingress通过主机头将请求路由到实际的服务,在 wordpress的 Ingress资源 配置里设置了 Host为 wp.test.com,故需要通过此域名才能访问 wordpress服务。步骤2 修改发起...
来自: 最佳实践 | 相关产品:块存储,专有网络 VPC,云服务器ECS,负载均衡 SLB,容器服务 ACK,访问控制,NAT网关,云企业网,容器镜像服务 ACR,弹性容器实例 ECI
自建K8S集群迁移ACK弹性裸金属集群
自建K8S集群迁移ACK弹性裸金属集群
场景描述 在微服务化改造之后,企业在享受K8S带来应 用管理的便利的同时,存在硬件性能不足,本 地扩展性差,容器容灾难,K8S管理复杂等问 题。 解决问题 1.增强K8S扩展性:如何通过弹性裸金属服务 器的强劲硬件性能,实现云端资源急速扩 展,从容应对应用访问压力大的问题。 2.如何简化云端K8S运维:通过阿里云容器服 务(ACK)实现敏捷开发和部署落地,加速 企业业务迭代。 3.如何综合考虑迁移和容灾:如何整合云上和 云下容器资源实现遇到故障时可以通过健 康检查实现自动容灾。 4.如何不改应用上云:如何实现应用上云数据 库连接零修改。 5.数据库上云及回退:如何实现上云回退; 产品列表 ACK/ECS/SLB/NAT网关/弹性裸金属服务器/DTS/RDS MySQL
步骤3 使用浏览器登录 Magento验证。步骤4 创建用户并登录。文档版本:20220128 33 自建 K8S集群迁移 ACK弹性裸金属集群 模拟线下 IDC K8S环境 文档版本:20220128 34 自建 K8S集群迁移 ACK弹性裸金属集群 模拟线下 IDC K8S环境 IDC环境模拟配置完毕。文档版本:20220128 35 自建 K8S集群迁移 ACK弹性裸金属集群 部署云上...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,负载均衡 SLB,容器服务 ACK,NAT网关,弹性裸金属服务器(神龙),云速搭
SLS多云日志采集、处理及分析
SLS多云日志采集、处理及分析
场景描述 从第三方云平台或线下IDC服务器上采集 日志写入到阿里云日志服务,通过日志服务 进行数据分析,帮助提升运维、运营效率, 建立DT 时代海量日志处理能力。 针对未使用其他日志采集服务的用户,推荐 在他云或线下服务器安装logtail采集并使用 Https安全传输;针对已使用其他日志采集 工具并且已有日志服务需要继续服务的情 况,可以通过Log producer SDK写入日志 服务。 解决问题 1.第三方云平台或线下IDC客户需要使用 阿里云日志服务生态的用户。 2.第三方云平台或线下IDC服务器已有完 整日志采集、处理及分析的用户。 产品列表 E-MapReduce 专有网络VPC 云服务器ECS 日志服务LOG DCDN
这种动作(网页浏览,搜索和其他用户的行动)是在现代网络上的 许多社会功能的一个关键因素。这些数据通常是由于吞吐量的要求而通过处理日志 和日志聚合来解决。对于像 Hadoop一样的日志数据和离线分析系统,但又要求实时 处理的限制,这是一个可行的解决方案。Kafka的目的是通过 Hadoop的并行加载机 制来统一线上和离线的...
来自: 最佳实践 | 相关产品:云服务器ECS,日志服务(SLS),NAT网关,E-MapReduce,全站加速 DCDN,云速搭CADT
游戏业务分区合服
游戏业务分区合服
概述 为了提高游戏玩家的体验,并提高留存率,增强付费率.除了游戏本身的内容趣味性外, 改善用户访问加速体验,并对游戏数据分区合服是很常见的业务运营场景. 本方案适用于: 1游戏业务运营,对多个分区数据库进行合并,增加付费用户积极性的需求. 2游戏业务加速,中心化部署的网络加速需求. 方案优势 1便捷数据迁移. 2内网安全传输 3加速远端用户访问质量体验 4快速应对上层业务运营的技术实现操作. 产品列表 网络产品:VPCSLBNAT网关CEN共享带宽包EIP全球加速GA 计算产品:ECS 数据库产品:RDSDTS 存储产品:OSS 云解析
因为将访问入口靠近最终用户后,可以利用阿里云各个地域间的内网专线,达到网 络 的 目 的。具 体 可 参 考 官 网 文 档:https://help.aliyun.com/knowledge_detail/56607.html 5.1.1. 创建并配置内网 SLB实例 背景信息 创建 SLB的目的是为了给之后创建的全球加速服务,提供一个华北地域的内网访问 入口。创建 SLB ...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,对象存储 OSS,数据传输,NAT网关,云企业网
应用IPv6改造
应用IPv6改造
方案一:增加支持IPv6的公网CLB 新创建一个IPv6协议的公网型CLB实例,后端挂载源IPv4的应用实例,并新增域名 ipv6-clb 解析到此实例。此方案对源IPv4业务系统无任何改造,但整体业务需要两个域名,分别对应IPv4和IPv6的客户端访问请求。 方案二:存量CLB迁移至NLB 采用支持双栈的NLB实例,可以同时接受IPv4/IPv6客户端请求,后端挂载源IPv4的应用实例。新增域名nlb-dualstack 到NLB实例,亦可保留源ipv4-clb域名。本实践以新增域名的方式进行演示。此方案需要源业务系统做一个业务流量的割接,其余没有改造,对外整体提供一个域名,同时满足IPv4和IPv6的客户端访问请求。 方案三:通过企业版WAF转发IPv6请求 新增一个企业版WAF实例,可以同时接受IPv4/IPv6客户端请求,后端挂载源IPv4的应用实例。源ipv4-clb域名保持不变。此方案对源业务系统的流量入口做了七层防护,对外整体提供一个域名,同时满足IPv4和IPv6的客户端访问请求。 方案四:通过标准版全球加速GA转发IPv6请求 新增一个标准版GA实例,可以指定接受IPv6客户端请求,后端挂载源IPv4的应用实例。源ipv4-clb域名保持不变,并新增域名 ipv6-ga 解析到GA实例。此方案对源IPv4业务系统无任何改造,整体业务需要两个域名,分别对应IPv4和IPv6的客户端访问请求。
文档版本:2024-08-20 15 应用IPv6改造最佳实践 构建 IPv4 web演示环境 后端日志获取到 IPv4源地址 步骤2 登陆 IPv6客户端的 windows,通过 IE浏览器输入 IPv4域名。文档版本:2024-08-20 16 应用IPv6改造最佳实践 构建 IPv4 web演示环境 可以看到后端接收到的依然是 IPv4的请求。文档版本:2024-08-20 17 应用IPv6改造最佳...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,负载均衡 SLB,Web应用防火墙,全球加速,云速搭CADT
开发工具
阿里云提供一系列开发工具帮助你更快捷、高效地开发与运维。通过云效、API等助力创新创业和数字化转型企业快速实现研发敏捷和组织敏捷。
是面向云原生的 WebIDE 产品,只需一个浏览器即可获得与本地 IDE 一致的开发体验.移动研发平台 EMAS.EMAS是国内领先的云原生应用研发平台,为用户提供一站式的应用研发管理服务.云原生应用组装平台 BizWorks.BizWorks是一体化的云原生应用的开发和运营平台,内置阿里业务中台构建的最佳技术实践.提供API托管服务,覆盖设计...
来自: 云产品
区块链服务
阿里云区块链服务简称BaaS,提供简单易用、一键部署、快速验证、灵活可定制的区块链服务,降低区块链应用开发门槛、提高开发效率,适用于供应链金融、商品溯源、版权等业务场景。
提供区块链浏览器及支付宝小程序浏览器.不提供测试环境.不支持添加节点.不支持磁盘扩容.不支持数据导出服务.不支持子链功能.5*8小时工单/钉钉群技术支持.适合客户:中小规模业务用户或业务初期可选择该版本,后续可升级到企业版.蚂蚁链 BaaS 专业版.蚂蚁链 Baas 企业版.价格:4.9万元/套/月;50万元/套/年.节点数量:4个...
来自: 云产品
数字证书管理服务(原SSL证书)
阿里云为您提供证书服务,在云上签发DigiCert、GlobalSign、GeoTrust、CFCA、WoSign证书,实现网站HTTPS化,使网站可信,防劫持、防篡改、防监听。并对云上证书进行统一生命周期管理,简化证书部署,一键分发到云上产品。
兼容主流浏览器和主流操作系统.兼容国际/国内主流RSA/ECC/国密算法.云上/云下统一管理,到期自动提醒,云产品一键部署,方便快捷.支持SSL证书多年订阅服务,最高可到3年,自动更新/部署.84A_98A_功能 板式一.84A_产品动态标题.产品动态时间线组件.84A_98A_标题.唐家哲,靖鑫,也树.查看SSL证书相关文档.查看如何购买及签发SSL...
来自: 云产品
数据库异地灾备
数据库异地灾备
场景描述 适用于不满足于单地域,对数据可靠性 (RPO)和服务可用性(RTO)要求更高 的,希望防范断电、断网等机房故障,抵 御地震、台风等自然灾害,具备异地容灾 备份恢复能力的客户业务场景。 解决问题 1.实时备份,RPO达到秒级 2.表级恢复,故障恢复时间大大缩短 3.长期归档,自动管理备份生命周期 4.异地灾备,构建数据库灾备中心 产品列表 专有网络VPC 云服务器ECS 弹性公网IP(EIP) 负载均衡SLB 云数据库RDSMySQL 数据库备份服务DBS 对象存储服务OSS 数据湖分析服务DLA 数据管理服务DMS 数据传输服务DTS
cd/var/www/html/ cp -rf /opt/WP/wordpress/*/var/www/html/ 步骤3 浏览器登录配置页面(访问 http://EIP即可跳转,EIP为 章节 1.3步骤 6记录的深圳生 产环境 ECS的公网地址),对 wordpress进行初始化设置,并单击安装 WordPress。具体参数配置见下表。配置项 说明 站点标题 DEMO 文档版本:20220207 27 数据库异地灾备 ...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,对象存储 OSS,数据管理,数据湖分析,数据库备份DBS,云速搭CADT
RAM角色集成企业OpenLDAP身份认证
RAM角色集成企业OpenLDAP身份认证
场景描述 本文介绍阿里云RAM使用KeyCloak集成企业OpenLDAP, 管理员工的身份及权限。配置RAM角色与KeyCloak 用户 /用户组的映射关系,实现企业员工使用企业OpenLDAP账 号以单点登录(SSO)的方式访问阿里云控制台。 解决问题 快速部署OpenLDAP及用户创建。 快速部署KeyCloak,并与OpenLDAP实现用户联 合。 阿里云角色SSO配置。 KeyCloak用户绑定RAM角色SSO。 KeyCloak用户组绑定RAM角色SSO。 产品列表 访问控制RAM 专有网络VPC 云服务器ECS 容器镜像服务ACR
使用浏览器登录 phpLDAPadmin,IP地址就是给 ECS 绑定的 EIP,端口是映射到 phpLDAPadmin的 6443端口。本例中 phpLDAPadmin登录地址:https://47.xxx.xxx.131:6443 用户名:cn=admin,dc=test,dc=com 密码:H3110!注:因为使用的是自签名的证书,所以浏览器会有安全告警,忽略即可。文档版本:20210616 18 RAM角色以 ...
来自: 最佳实践 | 相关产品:块存储,专有网络 VPC,云服务器ECS,访问控制,容器镜像服务 ACR,云速搭
本地数据中心基于SMB/NFS协议访问对象存储最佳实践
本地数据中心基于SMB/NFS协议访问对象存储最佳实践
1. 云存储扩容和迁移 集成智能缓存算法,自动识别冷热数据,将热数据保留在本地缓存,保证数据访问体验,无感知的将海量云存储数据接入本地数据中心,拓展存储空间。同时在云端 保留全量数据(冷+热)保证数据的一致性 2.云容灾 随着云计算的普及,越来越多的用户把自己的业务放到了云上。但是随着业务的发展,如何提高业务的可靠性和连续性,跨云容灾是一个比较热门的话题。借助云存 储网关对虚拟化的全面支持,可以轻松应对各种第三方云厂商对接阿里云的数据容灾。 3. 多地数据共享和分发 通过多个异地部署的文件网关实例,对接同一个阿里云OSS Bucket,可以实现快速的异地文件共享和分发,非常适合多个分支机构之间互相同步和共享数据。 4. 适配传统应用 有很多用户在云上的业务是新老业务的结合,老业务是从数据中心迁移过来的使用的是标准的存储协议,例如: NFS/SMB/iSCSI。新的应用往往采用比较新的技 术,支持对象访问的协议。如何沟通两种业务之间的数据是一个比较麻烦的事情,云存储网关正好起到一个桥梁的作用,可以便捷的沟通新旧业务,进行数据交换。 5. 替代 ossfs 和 ossftp ossfs 和 ossftp 都是基于文件协议的开源工具,用户可以通过它们直接上传文件到OSS。但是这两个开源文件都不建议在生产环境使用(POSIX 兼容度低),同时挂 载在用户的客户端需要额外的配置和缓存资源,对于多个客户端的情况安装配置繁琐。通过文件网关的服务可以完美替代 ossfs 和 ossftp。通过创建文件网关,用 户只需要执行简单的挂载(NFS)和映射(Windows SMB)就可以像使用本地文件系统一样使用 OSS。
文档版本:20210525 15 本地数据中心基于 SMB/NFS协议访问对象存储 安装本地云存储网关 步骤4 登录神龙裸金属服务器,打开 IE浏览器,输入上一步拷贝的 HyperV镜像下载链接进 行下载。2.4.创建 Hyper-V虚拟交换机 在安装 Hyper-V角色的过程中没有创建虚拟交换机。前面提到过云存储网关对网络的 要求,既要能主动访问公网,...
来自: 最佳实践 | 相关产品:对象存储 OSS,云存储网关
企业办公安全访问一体化
企业办公安全访问一体化
本场景模拟企业办公环境,基于 CSAS 服务构 建企业办公安全一体化方案,将“安全 + 网络” 能力无缝融合,实现了对云下办公终端安全的统 一管理,企业无需在投资复杂且昂贵的传统硬件 安全设备,即可快速构建安全、可靠、低成本的 办公安全防护体系。 1. 企业办公环境访问互联网的安全管理 2. 企业办公环境访问内网服务的安全管理 3. 企业办公网络、安全一体化管理
文档版本:20210129 56企业办公安全一体化最佳实践 企业办公访问内网服务安全防护 使用user002登录pc-bp220远程桌面,并开启CASA客户端,使用浏览器访问OA 系统,本文中地址为10.0.70.252,可以访问成功。访问财务系统,本文中为10.0.70.252:81,可以访问成功。文档版本:20210129 57企业办公安全一体化最佳实践 企业办公...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云安全访问服务
FastGPU极速AI训练/推理
FastGPU极速AI训练/推理
利用 FastGPU工具一键构建阿里云上的AI训练/推理环境,并使用AIACC加速工具进行加速。
FastGPU极速 AI训练/推理 最佳实践 架构图 场景描述 利用 FastGPU工具一键构建阿里云上的 AI 训练/推理环境,并使用 AIACC加速工具进 行加速。目前,FastGPU提供了三个 demo,分别是 GTC-demo,Pytorch 手势识别训练 InsightFace,Mxnet 人脸识别训练 Bert模型,Tensorflow语音识别训练 解决问题 1.快速构建 AI训练推理环境...
来自: 最佳实践 | 相关产品:块存储,专有网络 VPC,对象存储 OSS,文件存储NAS,文件存储 CPFS,GPU云服务器
互联网电商行业离线大数据分析
互联网电商行业离线大数据分析
电商网站销售数据通过大数据分析后将业务指标数据在大屏幕上展示,如销售指标、客户指标、销售排名、订单地区分布等。大屏上销售数据可视化动态展示,效果震撼,触控大屏支持用户自助查询数据,极大地增强数据的可读性。
步骤6 在浏览器中粘贴复制的分享链接,打开大屏页面,可投影到大屏展示。3.5.手动更新离线数据大屏展示 步骤1 用1.4章节新建的账号登录电商网站首页,单击添加到购物车添加两个商品到购物 车。步骤2 单击右上角购物车,并单击结账。步骤3 在物流地址页面,确认收货人相关信息,并单击下一步。步骤4 在确认及付款页面,确认...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,API网关,云速搭CADT
AHAS多活容灾MSHA
多活容灾MSHA是在阿里电商业务环境演进出来的多活容灾商业化产品,是应用高可用服务AHAS的核心模块,为客户提供容灾架构建设能力。横向支持容灾架构的上线、运维、演练、切流,升级到下线。纵向支持业务流量的全链路管理,从流量接入到服务化调用再到异步化消息,最终完成数据落库。
应用实时监控服务是一款应用性能管理产品,包含前端监控,应用监控和Prometheus监控三大子产品,涵盖了浏览器、小程序、APP、分布式应用和容器环境等性能管理,能帮助你实现全栈式的性能监控和端到端的全链路追踪诊断,让应用运维从未如此轻松高效.企业级分布式应用服务 EDAS.企业级分布式应用服务 EDAS是应用全生命周期...
来自: 云产品
混合云存储构建VMware虚拟化平台
混合云存储构建VMware虚拟化平台
场景描述 本文以混合云存储阵列SA2600系统为例,介绍如 何在混合云存储环境下部署VMware虚拟化平台, 以及混合云环境下虚拟机的部署、扩容、云备份等功 能演示。 解决问题 1.如何使用混合云存储部署VMware虚拟化平台。 2.存储阵列在混合云环境下的使用,比如虚拟机部 署、扩容、云备份等。 产品列表 1.混合云存储阵列 2.对象存储OSS
步骤12为虚拟机安装VMwareTools,右键单击虚拟机名称,选择打开浏览器控制台。文档版本:20191223 38 混合云存储构建VMware虚拟化平台 VMware环境搭建及配置 1.在虚拟机控制台上单击操作,选择客户机操作系统-安装VMwareTools。2.虚拟机中打开资源浏览器,双击DVD驱动器。文档版本:20191223 39 混合云存储构建VMware虚拟化...
来自: 最佳实践 | 相关产品:专有网络 VPC,对象存储 OSS,访问控制,混合云存储阵列 Hybrid Cloud
业务中台技术解决方案
阿里云业务中台解决方案为企业构建业务中台提供体系化的建设解决方案,涵盖从中台架构设计、中台实施、运行支持、持续治理等一整套业务中台建设方法论体系。阿里云业务中台解决方案基于经过阿里多年双十一洗礼的成熟云原生产品,结合完善的生态伙伴体系,成功帮助大量企业实现业务的实时在线与统一,实现各业务板块之间链接和协同,持续提升业务创新效率。
应用实时监控服务ARMS.ARMS是应用性能管理产品,包含前端,应用和Prometheus监控,涵盖了浏览器,APP,分布式应用和容器环境等性能管理,实现全栈式性能监控和全链路追踪诊断.PTS是面向所有技术背景人员的云化测试工具。PTS以互联网化的交互,提供性能测试、API调试和监测等多种能力。可以轻松模拟任意体量的用户访问业务的...
来自: 解决方案
云速搭部署智能接入网关SAG APP
云速搭部署智能接入网关SAG APP
本篇最佳实践通过CADT在华东2上海和美西弗吉尼亚创建跨地域的VPC,在VPC内部署ECS模拟办公系统应用。通过CADT购买SAG APP版并挂载到云连接网CCN,通过云企业网CEN将云上跨地域的VPC和云连接网CCN打通,实现内网互联互通。登录SAG客户端之后,就可以通过内网IP访问云上资源。
步骤13 打开浏览器输入 WebServer的内网 IP地址:http://192.168.10.246(以实际地址为准)可以访问到 web页面:文档版本:20211023 16 云速搭部署智能接入网关 SAG APP 产品支持 3.产品支持 产品详情:https://www.aliyun.com/product/developerservices/cadt 产品帮助:https://help.aliyun.com/product/182827.html 产品...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,云企业网,智能接入网关
应用实时监控服务ARMS
作为云原生可观测平台,应用实时监控服务 ARMS 包含前端监控、应用监控、云拨测等模块。覆盖浏览器、小程序、APP、分布式应用、容器等不同可观测环境与场景。帮助企业实现全栈性能监控与端到端追踪诊断。提高监控效率,压降运维工作量。
覆盖浏览器、小程序、APP 等客户端环境,观测与分析用户行为、页面性能,精准把握用户体验。覆盖分布式、微服务等应用架构与容器、Serverless 等部署环境,对服务调用、系统负载等进行监控与调用链分析,全面洞察与优化应用性能.日志服务每月100GB 仅需98.99元/年.立即开通(每月 50GB 免费额度).51A_首页banner.产品...
来自: 云产品
< 1 2 3 >
共有3页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用