MRACC加速倚天ECS实例Flink集群性能
MRACC加速倚天ECS实例Flink集群性能
希望了解Flink集群on倚天的部署架构。 通过神龙大数据加速引擎 Mracc 提升Flink集群性能。 希望实测了解倚天ECS实例运行Flink集群的性能 架构设计:利用阿里云官方架构设计模版,在此基础上二次定制(调整规格、资源数量、配置调整)。 快速完成PoC和生产环境的设计和部署
公网 NAT网关通过自定义 SNAT、DNAT规则可为云上 务器提供对外公网服务、及主动访问公网能力;私网 NAT网关(也即 VPC NAT 网关)可使 VPC内的 ECS实例通过私网地址转换服务,实现 VPC与 VPC之 间、及 VPC与线下 IDC互访能力。云速搭 CADT:是一款为上云应用提供自助式云架构管理的产品,显著地降低 应用云上管理的难度和...
来自: 最佳实践 相关产品:云服务器ECS,云速搭
倚天云服务器
倚天云服务器采用倚天710处理器,通过芯片快速路径加速手段,完成计算、存储、网络性能的数量级提升,应用于云原生、视频编解码、高性能计算和游戏服务等场景。
ARM迁移.
来自: 云产品
轻量级GPU部署云游戏最佳实践
<em>轻量</em>级GPU部署云游戏最佳实践
随着AI深度学习,视频处理,科学计算以及图形可视化等应用场景的普及,GPU的市场需求越来越大,但单颗物理GPU起步至超大规模弹性计算带来的计算能力过剩成本上升问题也越来越明显。轻量级GPU的诞生打破了传统直通模式的局限,可以提供比单颗物理GPU更细粒度的服务,从而让客户以更低成本、更高弹性开展业务。
轻量级 GPU部署云游戏 最佳实践 云游戏架构 场景描述 随着 AI深度学习,视频处理,科学计算以及图 形可视化等应用场景的普及,GPU的市场需求 越来越大,但单颗物理 GPU起步至超大规模弹 性计算带来的计算能力过剩成本上升问题也越 来越明显。轻量级 GPU的诞生打破了传统直通 模式的局限,可以提供比单颗物理 GPU更细粒 度的...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,弹性公网IP,云速搭
RAPIDS加速图像搜索
RAPIDS加速图像搜索
场景描述 本方案适用于使用RAPIDS加速平台 +GPU云服务器来对图像搜索任务进行加 速的场景。相比CPU,利用GPU+ RAPIDS在图像搜索场景下可以取得非常 明显的加速效果。 解决问题 1.搭建RAPIDS加速图像搜索环境 2.使用容器服务Kubernetes版部署图 像搜索环境 3.使用NAS存储计算数据 产品列表 容器服务Kubernetes版 GPU云服务器 文件存储NAS
登录终端,启动 ssh服务 默认的镜像没有启动 ssh服务,无法直接登录,需要通过控制台进入,启动 ssh ,然后才可以 ssh工具远程登录。某些版本的镜像第一次登录后,会弹出 Please enter your NGC API Key to login to the NGC Registery,这时输入之前保存的 API Key 并单击 Enter即可。21 RAPIDS加速图像搜索 登录...
来自: 最佳实践 | 相关产品:云服务器ECS,文件存储NAS,容器服务 ACK
RAPIDS加速机器学习
RAPIDS加速机器学习
场景描述 本方案适用于使用RAPIDS加速库+GPU 云服务器来对机器学习任务或者数据科学 任务进行加速的场景。相比CPU,利用 GPU+RAPIDS在某些场景下可以取得非常 明显的加速效果。 解决问题 1.搭建RAPIDS加速机器学习环境 2.使用容器服务Kubernetes版部署 RAPIDS环境 3.使用NAS存储计算数据 产品列表 容器服务Kubernetes版 GPU云服务器 文件存储NAS
登录终端,启动 ssh服务 默认的镜像没有启动 ssh服务,无法直接登录,需要通过控制台进入,启动 ssh ,然后才可以 ssh工具远程登录。某些版本的镜像第一次登录后,会弹出“Please enter your NGC API Key to login to the NGC Registery”,这时输入之前保存的 API Key 并点击 Enter。19 文档版本信息:20191209 ...
来自: 最佳实践 | 相关产品:云服务器ECS,文件存储NAS,容器服务 ACK
基于Flink+ClickHouse构建实时游戏数据分析
基于Flink+ClickHouse构建实时游戏数据分析
在互联网、游戏行业中,常常需要对用户行为日志进行分析,通过数据挖掘,来更好地支持业务运营,比如用户轨迹,热力图,登录行为分析,实时业务大屏等。当业务数据量达到千亿规模时,常常导致分析不实时,平均响应时间长达10分钟,影响业务的正常运营和发展。 本实践介绍如何快速收集海量用户行为数据,实现秒级响应的实时用户行为分析,并通过实时流计算Flink/Blink、云数据库ClickHouse等技术进行深入挖掘和分析,得到用户特征和画像,实现个性化系统推荐服务。 通过云数据库ClickHouse替换原有Presto数仓,对比开源Presto性能提升20倍。 利用云数据库ClickHouse极致分析性能,千亿级数据分析从10分钟缩短到30秒。 云数据库ClickHouse批量写入效率高,支持业务高峰每小时230亿的用户数据写入。 云数据库ClickHouse开箱即用,免运维,全球多Region部署,快速支持新游戏开服。 Flink+ClickHouse+QuickBI
步骤8 进入 ECS控制台,远程登录,操作如下:步骤9 通过 Workbench进行远程连接,操作界面如下图所示。步骤10 登录成功后,确认 game-server的包已经被拷贝到服务器上:文档版本:20201224 39 基于 Flink+ClickHouse构建实时游戏数据分析 游戏构建 步骤11 通过 yum工具进行 java安装。步骤12 查看 java版本。步骤13 以 ...
来自: 最佳实践 | 相关产品:云服务器ECS,弹性公网IP,实时计算,Quick BI,消息队列 Kafka 版,云数据库 ClickHouse
EMR集群安全认证和授权管理 
EMR集群安全认证和授权管理 
场景描述 阿里云EMR服务Kafka和Hadoop安全集群使 用Kerberos进行用户安全认证,通过Apache Ranger服务进行访问授权管理。本最佳实践中以 Apache Web服务器日志为例,演示基于Kafka 和Hadoop的生态组件构建日志大数据仓库,并 介绍在整个数据流程中,如何通过Kerberos和 Ranger进行认证和授权的相关配置。 解决问题 1.创建基于Kerberos的EMR Kafka和 Hadoop集群。 2.EMR服务的Kafka和Hadoop集群中 Kerberos相关配置和使用方法。 3.Ranger中添加Kafka、HDFS、Hive和 Hbase服务和访问策略。 4.Flume中和Kafka、HDFS相关的安全配 置。 产品列表:E-MapReduce、专有网络VPC、云服务器ECS、云数据库RDS版
Knox作为阿里云 EMR集群的默认服务进行安装,安装后,使用者可以指定阿里 云 RAM子用户作为认证用户,在公网直接访问 Yarn、HDFS、SparkHistory等 的 Web UI。1.2.授权(Authorization)授权是任何计算环境的基本安全要求之一。其目标是确保只有适当的人员或流程才能 访问、查看、使用、控制或更改特定的资源、服务或...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,E-MapReduce
自建ElasticSearch迁移阿里云
自建ElasticSearch迁移阿里云
场景描述 以ElasticSearch为例,演示搭建模拟业务系统、 VPN网关和IPSecVPN隧道,介绍如何通过快照 的方式,将ElasticSearch索引数据安全备份到 阿里云OSS存储空间,以及介绍如何将备份在 OSS的快照仓库恢复到阿里云ElasticSearch实 例,进一步达到ElasticSearch迁移上云的目的。 解决的问题 自建ElasticSearch的云上/跨云备份需求。 自建ElasticSearch迁移到阿里云 ElasticSearch服务实例。 产品列表 VPC,ECS,VPN网关,OSS,阿里云ElasticSearch,云速搭CADT
名词解释 云速搭 CADT:是一款为上云应用提供自助式云架构管理的产品,显著地降低 云上管理的难度和时间成本。本产品提供丰富的预制应用架构模板,同时也支 持自助拖拽方式定义应用云上架构;支持较多阿里云服务的配置和管理。用户可 以方便的对云上架构方案的成本、部署、运维、回收进行全生命周期的管理。详 见:...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,Elasticsearch,云速搭
RAM角色集成企业OpenLDAP身份认证
RAM角色集成企业OpenLDAP身份认证
场景描述 本文介绍阿里云RAM使用KeyCloak集成企业OpenLDAP, 管理员工的身份及权限。配置RAM角色与KeyCloak 用户 /用户组的映射关系,实现企业员工使用企业OpenLDAP账 号以单点登录(SSO)的方式访问阿里云控制台。 解决问题 快速部署OpenLDAP及用户创建。 快速部署KeyCloak,并与OpenLDAP实现用户联 合。 阿里云角色SSO配置。 KeyCloak用户绑定RAM角色SSO。 KeyCloak用户组绑定RAM角色SSO。 产品列表 访问控制RAM 专有网络VPC 云服务器ECS 容器镜像服务ACR
安装 Docker Engine-Community 操作步骤 通过 SSH远程登录 ECS实例,EIP为在 2.1.确认 ECS及 EIP实例章节步骤 2记录 的公网 IP。ssh root@EIP 安装基础工具。yum install-y yum-utils device-mapper-persistent-data lvm2 设置 Docker仓库。在新主机上首次安装 Docker Engine-Community 之前,需要设置 Docker 仓库。然 ...
来自: 最佳实践 | 相关产品:块存储,专有网络 VPC,云服务器ECS,访问控制,容器镜像服务 ACR,云速搭
EMR本地盘实例大规模数据集测试
场景描述 阿里云为了满足大数据场景下的存储需求,在云 上推出了本地盘D1机型,这个系列提供了本地 盘而非云盘作为存储,提高了磁盘的吞吐能力, 发挥Hadoop的就近计算优势。阿里云EMR 产品针对本地盘机型,推出了一整套的自动化运 维方案,帮助用户方便可靠地使用本地盘机型, 不需要关注整个运维过程同时数据的高可靠和 服务的高可用。 解决问题 1.云盘多份冗余数据导致成本高 2.磁盘吞吐量不高 3.节点的高可靠分布问题 4.本地盘与节点的故障监控问题 5.数据迁移时自动决策问题 6.自动故障节点迁移与数据平衡问题 产品列表 EMR(E-MapReduce) 本地盘 VPC
是阿里云提供的一种基础云计算 。无需提前采购硬件设备,根据业务需要,随时创建所需数量的云服务器 ECS 实例。在使用过程中,随着业务的扩展,可以随时扩容磁盘、增加贷款,也能随 时释放资源,节省费用。EMR:E-MapReduce(EMR)是构建在阿里云云服务器 ECS上的开源 Hadoop、Spark、Hive、Flink 生态大数据产品,提供...
来自: 最佳实践 | 相关产品:块存储,云服务器ECS,E-MapReduce
自建Hadoop迁移到阿里云EMR
自建Hadoop迁移到阿里云EMR
场景描述 场景1:自建Hadoop集群数据(HDFS)迁移到 阿里云EMR集群的HDFS文件系统; 场景2:自建Hadoop集群数据(HDFS)迁移到 计算存储分离架构的阿里云EMR集群,以OSS 和JindoFS作为EMR集群的后端存储。 解决的问题 客户自建Hadoop迁移到阿里云EMR集群的 技术方案; 基于IPSecVPN隧道构建安全和低成本数据 传输链路 产品列表 E-MapReduce,VPC,ECS,OSS,VPN网关。
HDFS能提供高吞吐的数据访问,非常适合大规模数据集上的 。OSS 对象存储服务(Object Storage Service,OSS)是一种海量、安全、低成本、高 可靠的云存储服务,适合存放任意类型的文件。容量和处理能力弹性扩展,多种 存储类型供选择,全面优化存储成本。JindoFS JindoFS是一种云原生的文件系统,结合 OSS和本地存储...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,E-MapReduce,云速搭
自建Hive数仓迁移到阿里云EMR
自建Hive数仓迁移到阿里云EMR
场景描述 客户在IDC或者公有云环境自建Hadoop集群构 建数据仓库和分析系统,购买阿里云EMR集群之 后,涉及到将数据仓库和Hive元数据的数据库迁 移上云。目前主流Hive数据仓库迁移场景为1.x 版本迁移到阿里云EMR(Hive2.x版本),涉及到 数据订正更新步骤。 解决的问题 Hive数据仓库的数据迁移方案 Hive元数据库的迁移方案 Hive跨版本迁移后的数据订正 产品列表 E-MapReduce,VPC,ECS,OSS,VPN网关。
步骤2 部署完成后,重启 Hive MetaStore和 HiveServer2 步骤3 由于在创建 EMR集群时我们指定了 RDS for MySQL实例的数据库作为 Hive的元数 据库,但是此时元数据库还未创建,因此在 EMR控制台可以看到 Hive MetaStore 异常停止。文档版本:20210721 25 自建Hive数据仓库跨版本迁移到阿里云 EMR 创建 EMR集群 通过查看 ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,E-MapReduce,云速搭
基于弹性计算的AI推理
基于弹性计算的AI推理
场景描述 本方案适用于使用GPU进行AI在线推理的场 景。在推理之前,模型已经训练完成。例如,刷脸 支付中,我们在刷脸的时候,就是推理的一个过 程。再比如图像分类,目标检测,语音识别,语 义分析等返回结果的过程。 解决问题 使用GPU云服务器搭建推理环境 使用容器服务Kubernetes版构建推理 环境 使用NAS存储模型数据 使用飞天AI加速推理工具加速推理 产品列表 GPU云服务器 容器服务Kubernetes版 NAS共享存储
本实践采用了如下产品:•GPU云服务器GN5I•共享存储NAS•阿里云容器服务Kubernetets版 阿里云飞天 AI加速解决方案 基于阿里云弹性基础资源,为用户提供性能极致优化、轻量便捷、开源开放的人工智能最佳实践。发布日期:20220320 I 企业上云实践 基于弹性计算的 AI推理最佳实践|演示环境说明 方案架构 用户通过域名访问推理...
来自: 最佳实践 | 相关产品:云服务器ECS,文件存储NAS,容器服务 ACK
远程日志
APP开发人员可通过远程日志拉取目标手机的日志文件(不包括用户隐私数据),进而帮助开发人员更快的定位线上疑难杂症,提升线上应用质量。
超级App解决方案.EMAS热卖爆品,限时超低价体验.0元开通立即体验.APP备案已启动,请APP主办者尽快登录备案系统进行备案申报.EMAS远程日志-端上问题排查利器.移动研发平台EMAS技术文章.近期重要功能.实时线上故障感知能力,5分钟发现异常.快速感知故障信息.闭环的线上问题排查分析能力,远程日志实时拉取异常日志.线上问题...
来自: 云产品
远程监考解决方案
远程监考解决方案,助力疫情期间学校、培训机构、企事业单位通过远程视频监考的方式,为全球各地学生按计划取得所学学分、学历认证提供了技术支撑。
监考老师利用在线考试系统中多分屏方式,对多个考生多机位远程监考,并可通过实时音视频通话进行线上考试操作培训,提醒考生注意事项.支持监考老师、考生的每一路音视频实时录制,或将多路音视频进行混流录制,方便考试单位,认证机构事后调取复盘.监考画面留存.监考画面留存.疫情冲击下教育行业面临着巨大的挑战,部分培训...
来自: 解决方案
大数据workshop
大数据workshop
大数据workshop
详见:https://www.aliyun.com/product/ecs DataHub:数据总线(DataHub)服务是阿里云提供的流式数据(Streaming Data)服务,它提供流式数据的发布(Publish)和订阅(Subscribe)的功能,让您可以 松 构 建 基 于 流 式 数 据 的 分 析 和 。详见:https://www.aliyun.com/product/datahub 实时计算 Flink 版:实时计算 ...
来自: 最佳实践 | 相关产品:块存储,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,弹性公网IP,数据传输,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,实时计算,数据总线,Quick BI,Hologres
远程教育AI辅助解决方案
远程教育AI辅助解决方案弥补了传统教育场景中的诸多不足,底座基于阿里云达摩院的算法能力,轻松接入,场景覆盖广泛,识别准确度较高。
线上监考主要覆盖如下两种场景:个人远程考试和个人线下固定机位考试。线上监考可以对线上考试的学生行为进行识别,支持屏幕聊天工具检测和考生状态检测。比如考试界面是否存在常见的聊天工具,以及考试过程中人脸人体个数、人脸角度朝向、是否戴耳机、是否使用手机等.AI 线上监考.线下课程老师点名经常遇到代签到的情况,...
来自: 解决方案
远程医疗平台解决方案
远程医疗平台解决方案利用移动互联网,将区域内的各级医疗机构资源进行整合。利用远程会诊系统满足养老机构医养结合需求。利用互联网大数据信息平台,医疗机构可以建立患者资料库,精准掌握患者健康状况和经济状况,做好预防、保健、治疗工作。利用区域医院交流沟通系统,搭建远程教育平台,发挥远程医疗的作用,实现重大疾病及时诊断、就近治疗,减少外出看病对贫困家庭造成的负担。
通过远程医疗平台,实现优势医疗机构对其他医疗机构进行远程诊疗和教育.远程医疗平台解决方案.成功案例解析.架构解析,深析成功架构.定制解决方案.1v1咨询,分析上云可行性.架构一键选购.多款成熟架构,超值推荐.通过远程医疗平台整合医疗资源进行医疗服务覆盖.多线BGP接入.保护数据隐私.不同地域患者访问流畅.防止黄牛恶意...
来自: 解决方案
组建多可区多地域的混合云
组建多可<em>用</em>区多地域的混合云
场景描述 无特定行业属性,对云下有IDC的用户,上云建 立多地域多可用区高稳定性的业务架构,组建混 合云用户都可适用。物理专线是打通IDC到云上 内网通道的最高质量和稳定性最好方式,但成本 较高,交付周期长。 解决问题 云下用户IDC应对业务突增弹性扩容能力 不足; 云下用户IDC业务需要多地域冗余; 云上阿里云业务需要多地域冗余; 云上阿里云业务需要多可用区冗余. 产品列表 VPC,CEN,高速通道(专线),SLB,ECS
阿里云 为云下 IDC赋能-组建多可区 多地域的混合云(专线)最佳实践 文档版本:20210805 组建多可区多地域的混合云(专线)最佳最佳实践 文档版本信息 文档版本信息 文本信息 属性 内容 文档名称 为云下 IDC赋能-组建多可区多地域的混合云(专线)最佳实践 文档编号 020 文档版本 V1.3 版本日期 2021-08-05 文档状态 外部...
来自: 最佳实践 | 相关产品:块存储,专有网络 VPC,云服务器ECS,云企业网,高速通道,云速搭
Exchange Server云上部署最佳实践
Exchange <em>Server</em>云上部署最佳实践
阿里云提供基础设施服务,能够以高可用、高容错且经济实惠的方式将Exchange Server部署在云上。通过在 阿里云上部署,可以获得Exchange Server的功能以及阿里云天然灵活性和安全性。
文档版本:20220119 69 Exchange Server云上部署最佳实践 配置 Exchange Server 文档版本:20220119 70 Exchange Server云上部署最佳实践 配置 Exchange Server 文档版本:20220119 71 Exchange Server云上部署最佳实践 配置 Exchange Server 文档版本:20220119 72 Exchange Server云上部署最佳实践 配置 Exchange Server ...
来自: 最佳实践 | 相关产品:云服务器ECS,负载均衡 SLB,弹性公网IP,NAT网关,SSL证书,云速搭CADT
< 1 2 3 4 ... 8 >
共有8页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用