超级计算集群实现自然语言处理训练
超级计算集群实现自然语言处理训练
场景描述 本方案适用于自然语言训练场景,使用神龙 GPU云服务器(SCCGN6)+CPFS进行NLP的 训练,采用Bert模型。这里不使用容器,直接 使用裸机进行NLP的Bert训练,使用飞天AI加 速训练工具可以有效提升多机多卡的训练效率。 解决问题 使用神龙GPU云服务器搭建NLP训练环 境 使用SCC的RDMA网络 使用CPFS存储训练数据 使用飞天AI加速训练工具加速训练 产品列表 神龙GPU云服务器(SCCGN6) SCC超级计算集群 CPFS共享存储
步骤3 在实例列表中,定位到scc001和scc002实例,查看并记录其公网IP地址和RDMA 地址。步骤4 通过在scc001上发起读请求,在scc002上接收,测试RDMA协议。1.通过SSH远程登录scc001节点。2.查看网络设置。ifconfigbond0 步骤5 结果如下:bond0:flags=5187 mtu1500 inet200.0.75.2 netmask255.255.255.252 broadcast200.0.171....
来自: 最佳实践 相关产品:文件存储NAS,超级计算集群
Dubbo应用上云
Dubbo应用上云
场景描述 本最佳实践适用于企业自建 Dubbo 应用上云, 应 用采用 docker 方式部署, 降低部署成本。同时利 用 MSE 提供 Zookeeper 服务注册管理。 通过阿 里云的 ARMS 和 AHAS 服务提供应用监控和服务 限流管理,简化运维并提供服务的全生命周期管 理。 解决问题 1. 自建 dubbo 应用迁移上阿里云。 2. 应用部署在容器内降低成本。 3. 通过 MSE 提供 ZK 服务,提高稳定性。 4. 通过 ARMS/AHAS 提供监控和服务限流能力 产品列表 容器服务 Kubernetes 版(ACK) 微服务引擎(MSE) 关系数据库服务(RDS) 应用高可用服务(AHAS) 应用实时监控服务(ARMS)
ssh-i dubbo.pem root@{docker_image_公网 IP} 2.执行以下命令,安装 Docker。yum install-y yum-utils yum remove docker docker-client docker-client-latest docker-common docker-latest docker-latest-logrotate docker-logrotate docker-engine yum install-y yum-utils device-mapper-persistent-data lvm2 yum-...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,容器服务 ACK,应用实时监控服务 ARMS ,应用高可用服务 AHAS,微服务引擎,云速搭
企业上云数据安全
企业上云数据安全
场景描述 企业是否选择上公共云,或者哪些系统或数据上 公共云,对数据安全的关心是重要因素之一。本 最佳实践重点在于介绍狭义的数据加密存储安 全范畴,即首先使用SDDP产品进行敏感数据发 现和分级分类,然后对高级别敏感数据进行按 需、不同类型的全链路加密存储。 解决问题 1.帮助客户发现敏感数据 2.对敏感数据进行分类、分级 3.对不同级别的数据如何选择加密方式 4.具体如何进行加密 产品列表 敏感数据识别SDDP 密钥管理服务KMS 云数据库RDS 对象存储OSS
基础环境搭建 先搭建基础云环境,一个虚拟专有网络,内部创建一台带公网 IP的 ECS,一个高可 用版本的 RDS数据库;开通 OSS服务和密钥管理服务 KMS;然后把自己管理的密 钥托管到 KMS产品上。1.1.使用云速搭 CADT快速创建资源 步骤1 登录云速搭 CADT控制台。(https://bpstudio.console.aliyun.com/#/bpStudio/topo)按照...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,密钥管理服务,敏感数据保护,云速搭CADT
微服务引擎的线上流量治理
微服务引擎的线上流量治理
随着业务不断创新,微服务架构及数字化转型不断落地,在这个过程中,大量企业采用了开源的组件构建了微服务,比如有开源微服务全家桶之称的Spring Cloud体系或Apache Dubbo等,微服务的好处之一,在于快速迭代,如何在迭代过程中保障线上流量不受损? 开源产品无运维工具,常常需要投入较大的运维人力和成本。 本实践将重点介绍如何快速集成主流开源微服务框架,实现业务零改造,解决开源框架在生产落地过程中的痛点,例如无损上下线、标签路由等,并通过托管微服务开源组件(API网关、注册中心、配置中心等)的服务,提供白屏化监控告警、容灾、宕机重启、扩缩容等能力,帮助企业释放业务无关的运维成本,聚焦业务本身的运维和发展。 方案优势 快速集成:通过JavaAgent技术实现Sping Cloud和Dubbo框架可以实现业务零改造接入。 免运维:托管微服务依赖开源中间件的服务,提供白屏化监控告警、容灾、宕机重启、扩缩容等能力,帮助我们客户释放业务无关的运维成本,聚焦自身业务本身的运维和发展。 开源增强:提供开源框架在生产落地过程中的痛点,例如应用无损上下线/金丝雀发布/南北+东西流量打通等,帮助客户的业务提高自身SLA和降低自研成本。
同时也支持 ECS,无需额外安装,只需要在 Java启动命令中带上 agent即 可,与平台无关,能够解决服务缩减时,服务出现一小段时间不可用的问题,实现 损下线。6.1.ACK-One-Pilot组件配置 步骤1 登录容器服务控制台。(https://cs.console.aliyun.com/)步骤2 在左侧导航栏选择市场>应用目录。步骤3 在应用目录页面搜索并...
来自: 最佳实践 | 相关产品:容器服务 ACK,微服务引擎,云速搭CADT
可观测可视化 Grafana 版
可观测可视化 Grafana 版作为云原生数据可视化平台,为运维SRE、研发工程师、产品经理、市场营销等不同角色提供开箱即用的一站式可视化平台,满足运维监控、经营分析、汇报展示等不同场景的查询、可视化、告警需求。
自行购买服务器、网络服务、Grafana 镜像、公网IP、域名备案等.资源购买&系统搭建.是否可访问 VPC 数据源.自行配置且无法跨 Region.默认集成可观测监控 Prometheus 版、日志服务、云监控.数据源数据存储时长及费用.支持(Prometheus监控大盘模板一键同步,其他类型模板可自选Grafana官方模板).无需单独配置,支持独立公网 ...
来自: 云产品
云数据传输
云数据传输是一种为云上流量提供统一计费和出账服务的服务开通型产品。支持对公网类产品的公网流量按照阶梯计费,用量越大单价越低;对跨地域类产品的跨地域流量按流量计费,这种计费方式更加灵活
公网类产品支持云服务器 ECS、弹性公网IP、传统型负载均衡等;跨地域类产品支持云企业 CEN、全球加速等.提供跨产品的统一流量账单和标签分账能力,提升业务、IT、财务协同效率.孙慧颖,靖鑫,也树.计费灵活,用量越大单价越低.公网类产品支持按流量阶梯计费,全新推出跨地域类产品按流量计费.支持全系公网、跨地域产品按...
来自: 云产品
云上持续审计合规最佳实践
云上持续审计合规最佳实践
本方案是面向云上资源的操作审计和配置审 计,提供的最佳实践。适用于企业型客户。通过最佳实践帮助客户在本场景下更好的使用 阿里云,涉及到配置审计、操作审计、函数计算、SLS、OSS 等服务的实践操作。 解决问题 企业会面临外部对企业云上信息系统的合规要求,如等保2.0法规要求。 同时当云上资源达到一定规模时,在内部会制定合规管控的基线,满足自身管理效率和安全合规的需 求。 包括记录云上资源管理的操作日志、资源配置变更日志,还需依赖云平台提供的持续监控和自动告警能力,实现合规性的自主监管。
无需管理服务器等基础设施,只编写代码并上传。函数计算会为客户准备好计 算资源,并以弹性、可靠的方式运行您的代码。详见:https://www.aliyun.com/product/fc 日志服务(SLS):一站式提供数据收集、清洗、分析、可视化和告警功能。全面 提升海量日志处理能力,实时挖掘数据价值,智能助力研发/运维/运营/安全等场景。...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,函数计算,操作审计,配置审计
基因计算工作流
基因计算工作流
场景描述 适合利用容器服务Kubernetes版上的工作流 引擎进行大规模基因测序的场景。阿里云工作流 引擎基于开源项目Argo实现,支持并发、循环、 重试等多种执行策略。典型的基因计算过程会把 数据分批进行计算,按照规定好的步骤依次完成 计算,这符合工作流的特点:多层次,有向无环 图。 解决问题 1.基因计算如何构建工作流 2.容器服务Kubernetes版结合 共享文件存储NAS提供数据 服务 3.构建单POD工作流 产品列表 容器服务Kubernetes版 文件存储NAS
ssh root@$masterip 步骤3 执行如下命令,下载 AGS工具并配置运行权限。wget http://ags-hub.oss-cn-hangzhou.aliyuncs.com/ags-linux && chmod +x ags-linux && mv ags-linux /usr/local/bin/ags 4.5.2. 初始化 ags配置 执行以下命令,并配置如图所示信息:ags config init 4.5.3.重新部署工作流资源 步骤1 卸载 ags工作流...
来自: 最佳实践 | 相关产品:块存储,云服务器ECS,文件存储NAS,容器服务 ACK
RAM用户集成企业AD FS身份认证
RAM用户集成企业AD FS身份认证
介绍阿里云RAM集成Windows AD FS,使用企 业AD对员工的身份认证及管理功能,配置RAM 用户与AD用户的映射关系,实现企业员工使用企 业AD域账号以单点登录(SSO)的方式访问阿里 云控制台。 解决问题 1.Windows AD域部署。 2.Windows AD证书服务及Web服务部署。 3.Windows AD FS部署。 4.阿里云用户SSO配置。 5.AD FS集成RAM用户SSO。 产品列表 l访问控制RAM l专有网络VPC l云服务器ECS
注意:这里不要手动修改服务器的IP地址(手动修改服务器IP不会生效,也无需担 心服务器IP会重启发生改变),如果要修改请在控制台操作。文档版本:20220617 10企业上云实践 文档标题|章节名 2.2.部署WindowsActiveDirectory 步骤1 接上步,启动服务管理器。步骤2 确认开始安装。文档版本:20220617 11企业上云实践 文档标题...
来自: 最佳实践 | 相关产品:块存储,专有网络 VPC,云服务器ECS,弹性公网IP,访问控制,云速搭CADT
共享流量包
阿里云共享流量包价格实惠,提供流量包年包月及产品试用。多产品覆盖,通用性好,按流量计费的ECS、EIP、SLB和NAT均可使用。使用简单,开通后自动抵扣多产品多地域流量费用。
弹性公网IP(Elastic IP Address,简称EIP)是独立的公网IP资源,可以与阿里云专有网络类型的云服务器ECS、NAT网关、ENI网卡、私负载均衡SLB绑定,并可以动态解绑,满足灵活管理的要求.云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的云计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新...
来自: 云产品
威胁狩猎服务
威胁狩猎服务是阿里云基于多年网络攻防经验推出的一款欺骗伪装类产品。威胁狩猎服务是蜜罐产品在公共云上的创新应用,通过简单、灵活、轻量级的部署及专家运营模式,提供精准威胁情报服务,帮助客户精度定位攻击行为,进一步加强客户侧纵深防御体系。
1个公网IP全年免费;最大可同时接入3个域名.松耦合易部署,无需购买云资源.二级域名指向到探针(仿真业务,最多可3个域名同时指向探针).标题-更多产品与服务.唐家哲,靖鑫,也树.阿里云安全管家服务是阿里云安全专家基于阿里云多年安全最佳实践经验为云上用户提供的全方位安全技术和咨询服务,为云上用户建立和持续优化云...
来自: 云产品
VMware on 弹性裸金属
VMware on 弹性裸金属
场景描述 传统企业将VMware迁移到阿里云弹性裸 金属,利用云计算平台提供的弹性基础设 施,降低部分运维成本和学习成本,使用其 擅长的技术工具专注自身业务,实现线下业 务平滑迁移上云。 解决问题 1.VMware业务平滑迁移上云 2.集成云产品能力增强业务创新 3.降低混合云成本和复杂度 4.增强系统可用性 产品列表 EBM神龙 ECS NAS OSS ENI NAT EIP
类别 明细项 说明  一块ENI用于hostoverlay使用 VMware网络部署支持VLAN和ovlerlay两种方式,本例采用overlay部 署方式 IP地址 ENI的IP和公网IP为阿里云系统分配,每次分配的IP 不同,因此实际操作中使用实际IP替换本例中的IP。文档版本:20191121 4 VMwareon弹性裸金属 搭建网络环境 1.搭建网络环境 1.1.创建专有网络 ...
来自: 最佳实践 | 相关产品:云服务器ECS,弹性公网IP,文件存储NAS,NAT网关,弹性裸金属服务器(神龙)
网络智能服务NIS
网络智能服务NIS是阿里云推出的一款网络运维云服务,可提供网络健康分析、性能监控、诊断修复、流量分析等。通过集成专家经验、机器学习,方便用户自助运维。
弹性公网IP是独立的公网IP资源,可与阿里云专有网络VPC类型的云服务器ECS、NAT网关、ENI网卡、私负载均衡SLB绑定,并可以动态解绑满足灵活管理的要求。弹性公网IP可为您在云上部署的网站提供Internet访问服务.云企业CEN是阿里云提供的一款能够快速构建混合云和分布式业务系统的全球网络服务,为用户提供优质、高效、...
来自: 云产品
游戏数据运营融合分析
游戏数据运营融合分析
场景描述 1.游戏行业有结构化和非结构化数据融合分 析需求的客户。 2.游戏行业有数据实时分析需求的客户,无法 接受T+1延迟。 3.对数据成本有一定诉求的客户,希望物尽其 用尽量优化成本。 4.其他行业有类似需求的客户。 方案优势/解决问题 1.秒级实时分析:依托ADB计算密集型实例, 秒级监控DAU等数据,为广告投放效果提 供有力的在线决策支撑。 2.高效数据融合分析:打通结构化和非结构化 数据,支撑产品体验分析;广告买量投放效 果实时(分钟级)分析,渠道的评估更准确。 3.低成本:DLA融合冷数据分析+ADB存储密 集型温数据分析+ADB计算密集型热数据分 析,在满足各种分析场景需求的同时,有效 地降低的客户的总体使用成本。 4.学习成本低:DLA和ADB兼容标准SQL语 法,无需额外学习其他技术。 产品列表 专有网络VPC、负载均衡SLB、NAT网关、弹性公网IP 云服务器ECS、日志服务SLS、对象存储OSS 数据库RDSMySQL、数据传输服务DTS、数据管理DMS 分析型数据库MySQL版ADS 数据湖分析DLA、QuickBI
产品列表 专有网络 VPC、负载均衡 SLB、NAT网关、弹性公网 IP 云服务器 ECS、日志服务 SLS、对 象存储 OSS 数据库 RDS MySQL、数据传输服 务 DTS、数据管理 DMS 分析型数据库 MySQL版 ADS 数据湖分析 DLA、Quick BI 云服务器 ECS(产品名称)文档模板(手册名称)/文档版本信息 阿里云 游戏数据运营融合分析 最佳实践 文档...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,对象存储 OSS,云原生数据仓库AnalyticDB My,数据湖分析,Quick BI
新零售网络解决方案
基于SDN和SD-WAN技术,新零售网络解决方案帮助零售商构建降本增效的云化智能网络,实现零售业务平滑上云。依托阿里巴巴覆盖全球的优质网络资源,企业总部、IDC、零售门店等场景安全互联,业务系统稳定可靠,业务拓展灵活高效。
新零售网络解决方案.基于 SDN 和 SD-WAN 技术,阿里云网络帮助零售商构建降本增效的智能云网络,实现零售业务平滑上云。依托阿里巴巴覆盖全球的优质...独立的公网 IP 地址及带宽,可以绑定到 ECS、SLB 上,提供公网访问能力,可以动态解绑.根据您提交的需求,将有售前专家免费服务!根据您提交的需求,将有售前专家免费服务!
来自: 解决方案
云防火墙
阿里云云防火墙可提供统一的互联网边界、内网VPC边界、主机边界流量管控防护,包括结合情报的实时入侵防护能力,是您的网络边界防护和等保合规利器。
可统一管理互联网到业务的访问控制策略(南北向)和业务与业务之间的微隔离策略(东西向),提供4-7层精细化访问控制,包括基于IP、端口、应用、域名、地理位置等访问管控.NAT防火墙私网管控.NAT防火墙通过对私网IP访问公网的流量精细管控,只允许私网资产访问外部指定域名、应用、IP、端口、地理位置等,有效地保护企业...
来自: 云产品
云解析PrivateZone
云解析PrivateZone是基于阿里云专有网络VPC环境的内网域名解析和管理服务。能够在自定义的一个或多个VPC中快速构建DNS系统,实现不同VPC的完全数据隔离,更安全。
服务地址:基于 VPC 自定义私 IP 访问 PrivateZone,解决100段地址冲突.内置权威:支持分线路/分权重智能解析,实现应用单元化改造和负载均衡.缓存管理:指定公网域名常驻缓存,外部三方公网DNS异常时仍可正常解析.转发管理:云上 DNS 查询转发到云下 DNS,支撑混合云业务间调用场景.流量分析:支持基于 DNS 解析日志的全...
来自: 云产品
MRACC加速倚天ECS实例Flink集群性能
MRACC加速倚天ECS实例Flink集群性能
希望了解Flink集群on倚天的部署架构。 通过神龙大数据加速引擎 Mracc 提升Flink集群性能。 希望实测了解倚天ECS实例运行Flink集群的性能 架构设计:利用阿里云官方架构设计模版,在此基础上二次定制(调整规格、资源数量、配置调整)。 快速完成PoC和生产环境的设计和部署
方案中采用新建 VPC、交换机、安全组,ECS的私 IP配置如下,ᅳ Master1:192.168.0.10 ᅳ Worker1:192.168.0.11 ᅳ Worker2:192.168.0.12 ᅳ Worker3:192.168.0.13 ᅳ Worker4:192.168.0.14 ᅳ Worker5:192.168.0.15 ᅳ Worker6:192.168.0.16 文档版本:20230801 3 倚天ECS实例加速Flink运行 最佳实践概述 VPC内配置独立 ...
来自: 最佳实践 | 相关产品:云服务器ECS,云速搭
云速搭部署 NAS 文件系统
云速搭部署 NAS 文件系统
本实践通过云速搭构建一个 NAS,并将 NAS 文件系统挂载到 ECS 的目录上。
专有网络由逻辑网络设备(如虚拟路由器,虚拟 交换机)组成,可以通过专线/VPN等连接方式与传统数据中心组成一个按定 制 的 络 环 境,实 现 应 用 的 平 滑 迁 移 上 云。详 见:https://www.aliyun.com/product/vpc 云服务器 ECS:云服务器 ECS(Elastic Compute Service)是一种简单高效、处理能力可弹性伸缩的计算...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,文件存储NAS,云速搭CADT
< 1 2 3 4 ... 8 >
共有8页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用