自建Hive数仓迁移到阿里云EMR
自建Hive数仓迁移到阿里云EMR
场景描述 客户在IDC或者公有云环境自建Hadoop集群构 建数据仓库和分析系统,购买阿里云EMR集群之 后,涉及到将数据仓库和Hive元数据的数据库迁 移上云。目前主流Hive数据仓库迁移场景为1.x 版本迁移到阿里云EMR(Hive2.x版本),涉及到 数据订正更新步骤。 解决的问题 Hive数据仓库的数据迁移方案 Hive元数据库的迁移方案 Hive跨版本迁移后的数据订正 产品列表 E-MapReduce,VPC,ECS,OSS,VPN网关。
付费模式:按使用流量 带宽:100 Mbps 说明:(1)在您业务商用过程中,建议选用弹性公网 IP和共享带宽包、共享流量包的组合降低公网流量使 文档版本:20210721 6 自建Hive数据仓库跨版本迁移到阿里云 EMR 基础环境搭建 成本;(2)在环境搭建过程中分配公网 IP地址仅 用于 SSH登录和必要的软件包下载,在环境搭建完 成...
来自: 最佳实践 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,E-MapReduce,云速搭
混合云使用Ali-Perseus
混合云使用Ali-Perseus
场景描述 本文介绍了混合云场景中,自建 Kubernetes服务,线下集群+云上弹性扩 展阿里云GPU服务实例+飞天AI加速工 具,并采用阿里云CPFS存储,运行AI训 练+AI推理作业的操作步骤。 解决问题 1.利用云企业网打通两个地域的VPC, 自建Kubernetes集群 2.使用飞天AI加速工具运行训练和推理 作业 3.使用CPFS存储共享数据 产品列表 云企业网CEN GPU云服务器 并行文件存储CPFS 文件存储NAS
类别 配置项 说明 系统配置 登录凭证 密钥对 密钥对 单击新建密钥对。2.在创建密钥对页面,参考下表,配置相关参数,并单击确定。配置项 说明 密钥对名称 设置符合要求的密钥对名称。本实践设置为 key-ai。创建类型 自动新建密钥对。22 混合云使用飞天AI加速工具 创建 ECS实例 配置完成,单击下一步:分组设置。步骤7 在...
来自: 最佳实践 | 相关产品:云服务器ECS,文件存储NAS,云企业网
资源管理
资源管理
场景描述 随着企业IT成熟度不断提高、管理的云上资源 不断增多,如何对资源进行高效管理的问题就会 凸显出来。阿里云的资源管理服务支持您按照业 务需要搭建适合的资源组织关系,使用目录、资 源夹、账号、资源组分层次组织与管理您的全部 资源,更好的实现项目成功。 解决问题 1.按照企业组织结构管理账号体系。 2.指定结算账号进行统一结算 3.统一管理成员账号权限系统 4.账号下的资源按照资源组进行分类 5.可以按照自定义财务单元进行分账管理 产品列表 资源管理
创建资源夹 资源夹最多支持 5级(根资源夹除外),请根据组织实际情况,按照团队、项目以及应 等多个不同维度组织管理资源。文档版本:2021-07-12 6 资源管理 资源目录 步骤1 单击根资源夹,然后单击新建资源夹。步骤2 在新建资源夹侧边页,设置资源夹名称为 Application,并单击确定。步骤3 重复步骤 2,完成剩余资源夹...
来自: 最佳实践 | 相关产品:资源管理
云端影视渲染
云端影视渲染
场景描述 本文介绍如何搭建一个完整的混合云渲染服务架构,本地与云端的网络以SSL-VPN方式进行互联。 解决问题 1、使用SSL-VPN构建本地网络与云上VPC环境的安全互联。 2、使用批量计算服务管理渲染计算集群,集群计算节点自动加入Deadline资源池。 3、使用Deadline做渲染任务管理。 4、批量计算集群计算节点根据Deadline渲染任务自动扩容和收缩,资源管理自动化。 产品列表 1、云服务器ECS 2、GPU云服务器GPU 3、批量计算BCS 4、专有网络VPC 5、弹性公网IP 6、文件存储NAS
文档版本:20200220 16 云端影视渲染 创建并配置 NAS实例 步骤5 购买通用型 NAS(存储包),完成以下配置,并单击立即购买。配置项 说明 区域 华北 2(北京)可用区 华北 2 可用区 H 协议类型 NFS 存储类型 性能型 文件系统 ID 创建新文件系统并绑定存储包(测试情况下请采用按量付费方式)容量 根据实际需要选择 购买数量 ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,文件存储NAS,VPN网关,批量计算
自建ElasticSearch迁移阿里云
自建ElasticSearch迁移阿里云
场景描述 以ElasticSearch为例,演示搭建模拟业务系统、 VPN网关和IPSecVPN隧道,介绍如何通过快照 的方式,将ElasticSearch索引数据安全备份到 阿里云OSS存储空间,以及介绍如何将备份在 OSS的快照仓库恢复到阿里云ElasticSearch实 例,进一步达到ElasticSearch迁移上云的目的。 解决的问题 自建ElasticSearch的云上/跨云备份需求。 自建ElasticSearch迁移到阿里云 ElasticSearch服务实例。 产品列表 VPC,ECS,VPN网关,OSS,阿里云ElasticSearch,云速搭CADT
通用场景 版本 5.5 支付方式 后付费 可用区数量 单可用区 规格族 云盘型 数据节点规格 elasticsearch.sn1ne.large 存储类型 SSD云盘 单点节点存储空 20GiB 间 数量 3 Kibana Kibana节点 勾选 节点规格 elasticsearch.sn1ne.large 文档版本:20210802 9 自建 ElasticSearch快照备份 OSS 基础环境搭建 其他选项 均不勾选 VPN ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,Elasticsearch,云速搭
超级计算集群实现自然语言处理训练
超级计算集群实现自然语言处理训练
场景描述 本方案适用于自然语言训练场景,使用神龙 GPU云服务器(SCCGN6)+CPFS进行NLP的 训练,采用Bert模型。这里不使用容器,直接 使用裸机进行NLP的Bert训练,使用飞天AI加 速训练工具可以有效提升多机多卡的训练效率。 解决问题 使用神龙GPU云服务器搭建NLP训练环 境 使用SCC的RDMA网络 使用CPFS存储训练数据 使用飞天AI加速训练工具加速训练 产品列表 神龙GPU云服务器(SCCGN6) SCC超级计算集群 CPFS共享存储
Pretrain模型为通用的语言 模型。Finetune只需要在Pretrain的基础上增加一层适配层就可以服务于从问答到语言推理等 各类任务,无需为具体任务修改整体模型架构。这种设计方便BERT预处理模型适配于各类具 体NLP模型(类似于CV领域基于ImageNet训练的各种Backbone模型)。2企业上云实践 基于超级计算集群的自然语言处理AI训练...
来自: 最佳实践 | 相关产品:文件存储NAS,超级计算集群
互联网业务全球化互通组网
互联网业务全球化互通组网
场景描述 本方案适用从事全球化业务的客户,希望借助全球 互通的网络,实现多地域的互通。 同时在全球互联的网络下,搭建应用多地部署。如果 业务中涉及到高速通道,提供高速通道迁移云企业网 的操作演练;涉及到跨账号多VPC下的数据迁移和 同步,本方案提供详细的操作步骤,帮助客户快速完 成演练。 解决问题 借助云企业网解决网络互通 高速通道到云企业网的平滑迁移 RDS的数据互通,特别是跨账号多VPC的数据同步 应用的快速部署 产品列表 云企业网(CEN)、云服务器(ECS)、数据库(RDS)、 数据库(Redis)、数据传输(DTS)、负载均衡(SLB) 块存储、专有网络(VPC)
配置项 说明 计费方式 按量付费 地域 华南 1(杭州)类型 MySQL 5.6 系列 高可用版 存储类型 本地 SSD盘(推荐)可用区 多可区(可用区 D+可用区 E)实例规格 2 CPU(核),4GB(通用型)rds.mysql.s2.large(2核 4GB)存储空间 50GB 配置完成,单击下一步:网络和资源组。文档版本:20191217 23 互联网业务全球化互通组网...
来自: 最佳实践 | 相关产品:块存储,云服务器ECS,云数据库RDS MySQL 版,数据传输,云企业网
Openstack迁移DDH
Openstack迁移DDH
场景描述 在线下IDC中,很多用户使用OpenStack构建云环境,本 文介绍如何将线下IDC中基于OpenStack构建的云服务器 迁移到阿里云专有宿主机(DDH)上,从而实现业务平滑 上云的同时,显著降低成本。 解决问题 1.如何将OpenStack中的云服务器迁移 DDH上。 2.如何使用DDH构建云上环境。 产品列表 专有宿主机DDH 对象存储OSS 服务器迁移中心SMC 专有网络VPC
这里我们的目的是迁移应用,不做通用的ECS镜像,其他步骤省略。文档版本:20200312(发布日期)48 Openstack迁移DDH 上传镜像并导入 5.上传镜像并导入 上传镜像之前,需要先创建阿里云的RAM子账号,并赋权限。然后创建OSS的bucket 用于存储镜像。5.1.创建RAM子账号 登录RAM访问控制管理控制台。...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,专有宿主机
文字识别
阿里云OCR文字识别是可以将图片识别文字的数据智能产品,支持印刷品、卡证、票据、图片、文档等多类文件,具备全栈全场景的文字识别能力,
通用文字识别.车辆物流识别.票据凭证识别.企业资质识别.国际卡证场景识别.贸易单证识别.OCR文档自学习.OCR离线SDK.文字识别主页面.采购季来袭!OCR热门产品低至0.99元/1000次资源包,限购1单,快来抢购吧.开通享免费额度.文字识别 OCR 用于识别图片、文档、卡证等文件所包含的文字信息。本产品具备完善的图像检测、文字识别...
来自: 云产品
行业文档识别
阿里云提供行业文档类识别,可以高精度识别各行业文档和表单表格,通用于各行业的通用文字识别。包含单字坐标,表格识别,图像旋转等功能,广泛应用于司法、金融、医疗等各行业,方便工作人员审核录入核对,节约人力时间成本。
票据凭证识别.企业资质识别.行业文档类识别.通用文字识别.教育场景识别.仪器仪表识别.特殊场景 OCR 识别.物流海关系列识别.行业文档类识别.印刷文字识别.更多产品与服务.快速结构化输出多个字段的票据内容:包含 增值税发票识别、机动车发票识别、火车票识别、出租车发票识别等.行业票据识别.适用于多场景、多语种的图片...
来自: 云产品
特殊场景OCR识别
阿里云特殊场景OCR识别,支持多卡证、多票据混贴等场景的文字识别服务。包括票据混贴智能分类识别、通用混贴票证识别、多卡证智能分类识别。
包括票据混贴智能分类识别、通用混贴票证识别、多卡智能分类识别.查看产品文档.特殊场景 OCR 识别.更多产品与服务.提供文字识别的云端服务接口,可直接调用API或使用HTTP服务对图片中的文字进行识别.部署至本地服务器,在私有化环境中实现文字识别功能,保障数据私密性.集成到移动APP、Android、iOS或设备端中,无需网络...
来自: 云产品
企业资质识别
阿里云企业资质识别支持各类资产证件的识别。企业资产如营业执照识别,可结构化识别出注册号,公司名称,公司地址,法人代表,营业期限等多个字段; 房产证识别可识别多种商品性质房源,快速准确识别房屋性质,坐落,权利人等10个字段。结构化输出业务所需的字段,方便工作人员审核录入,核对,有效节约人力时间成本。
后付,开通即享免费额度,按量付费服务.产品规格-后付费按次调用.文字识别主页面.个人证照识别.通用文字识别.车辆物流识别.票据凭证识别.贸易单证识别.企业资质识别.功能介绍与体验.支持用户通过简单的标注创建专属自己的模板,生成识别规则,满足用户的个性化OCR需求.提供从基础版式到开放版式的场景化识别服务能力。...
来自: 云产品
视觉人像通用技术解决方案
视觉人像通用技术解决方案是基于阿里达摩院 AI 技术,面向开发者和企业用户,提供人像比对、人像建库、人像搜索及权威人像身份核验等多品类的云上人像能力,应用于数智门店,无感考勤、通行、身份识别,刷脸支付,在线教育等多种场景。
本方案主要面向考勤通行、远程教育、金融风控等场景,为开发者和企业用户提供高性能、高可用的一站式云上视觉人像通用技术,以阿里巴巴达摩院视觉智能开放平台为依托,输出人像比对、人像搜索、人像核身、五官定位等多种类人像原子能力,并可快速集成视频拉流、存储等扩展能力.视觉人像通用技术解决方案.开发者和企业用户在...
来自: 解决方案
< 1 2 3 >
共有3页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用