自建Hadoop迁移MaxCompute
场景描述 客户基于ECS、IDC自建或在友商云平台自建了大数 据集群，为了降低企业大数据计算平台的成本，提高 大数据应用开发效率，更有效保障数据安全，把大数 据集群的数据、作业、调度任务以及业务数据库整体 迁移到MaxCompute和其他云产品。 解决的问题 自建Hadoop集群搬迁到MaxCompute 自建Hbase集群搬迁到云Hbase 自建Kafka或应用数据准实时同步到 MaxCompute 自建Azkaban任务迁移到Dataworks任务 产品列表 MaxCompute，Dataworks、云数据库Hbase版、Datahub、VPC，ECS。
步骤5 编辑 ODPS SQL任务：步骤6 将步骤 1改造后的 ODPS SQL填写到编辑页面，并设置调度参数 date_of_last_hour:$[yyyymmdd-1/24]表示取任务执行时间前一个小时的日期值 last_hour:$[hh24-1/24]表示取任务执行时间前一个小时的小时值 文档版本：20210723 61 自建Hadoop迁移MaxCompute Azkaban定时任务迁移和改造 结果如下所...
资源管理
场景描述 随着企业IT成熟度不断提高、管理的云上资源 不断增多，如何对资源进行高效管理的问题就会 凸显出来。阿里云的资源管理服务支持您按照业 务需要搭建适合的资源组织关系，使用目录、资 源夹、账号、资源组分层次组织与管理您的全部 资源，更好的实现项目成功。 解决问题 1.按照企业组织结构管理账号体系。 2.指定结算账号进行统一结算 3.统一管理成员账号权限系统 4.账号下的资源按照资源组进行分类 5.可以按照自定义财务单元进行分账管理 产品列表 资源管理
本示例填写 应用 1组。步骤4 重复步骤 3，创建财务单元 应用 2组。文档版本：2021-07-12 51 资源管理 资源组 4.3.3.关联资源到财务单元 步骤1 点击未分配，按照资源组进行资源筛选。注意：此处资源组属性值存在 T+2天的延迟，也就是说在调整了资源归属的资源组的 48小时之后，才可以按照资源组对资源进行筛选批量操作。比如...
游戏业务分区合服
概述 为了提高游戏玩家的体验,并提高留存率,增强付费率.除了游戏本身的内容趣味性外, 改善用户访问加速体验,并对游戏数据分区合服是很常见的业务运营场景. 本方案适用于: 1游戏业务运营,对多个分区数据库进行合并,增加付费用户积极性的需求. 2游戏业务加速,中心化部署的网络加速需求. 方案优势 1便捷数据迁移. 2内网安全传输 3加速远端用户访问质量体验 4快速应对上层业务运营的技术实现操作. 产品列表 网络产品:VPCSLBNAT网关CEN共享带宽包EIP全球加速GA 计算产品:ECS 数据库产品:RDSDTS 存储产品:OSS 云解析
配置项 说明 记录类型 A 主机记录 bf 解析线路 默认 记录值 39.xxx.xxx.240 此处填写 SLB绑定的外网 IP，即本实践中对应的 EIP实例 BEI_EIP_SLB对应的 IP地址。TTL 10分钟 文档版本：20220121 54 游戏业务分区合服最佳实践 初始环境搭建 完成后控制台看到如下解析条目。一般几分钟后就可以全网生效了。3.4.3.业务验证 步骤1...
基于k8s多集群隔离环境下的devops实现
场景描述 DevOps是一组过程、方法与系统 的统称，并通过工具实现自动化部署， 确保部署任务的可重复性、减少部署出 错的可能性。随着微服务、中台架构的 兴起，devops重要性日益显著。 本方案使用两个独立的k8s集群： 用户已有的k8s模拟测试，ack集群模 拟生产环境，保证环境的高度隔离，互 不影响。通过gitlab+Jenkins的黄金组 合，实现容器应用的自动化构建和持续 部署，提高迭代效率。 解决问题 1.微服务应用的CI/CD。 2.测试和生产环境的高度隔离。 3.自动化的测试与部署。 4.现有CI对接ACK。 产品列表 专有网络VPC 容器服务ACK 容器镜像服务ACR 弹性公网IP 负载均衡SLB
1.登录到 Gitlab->account-service项目中，左边列选择 Settings->webhook，在 URL 和 secret token分别填入上文在 Jenkins里记录下的值。2.在页面最下端，确认添加 webhook，并进行测试。文档版本：20220121 40 基于 K8S多集群隔离环境下的 DevOps实现 持续集成及持续部署 5.1.3.邮件通知配置 邮件是 Jenkins在消息通知、...
基于DDH+MyBase降本合规
出版、金融、保险等传统行业一方面希望能借助云计算以更好地适应业务发展需求（政策上云），另一方面出于对降低单实例部署成本（CPU 超分超配）以及满足更严格合规和监管要求的考虑，希望能对云上资源有更多的自主控制权（监管合规）。从业务系统架构云上部署的角度，基于专有宿主机DDH 和云数据库专属集群MyBase 的解决方案，可以很好地满足这两方面的需求。 解决问题： 1. 国家政策上云趋势和需求 2. 更严格的云上安全合规要求 3. 对云上资源有更灵活的管控权 4. 有效降低企业上云的整体拥有成本（TCO） 方案优势： 1、单租户隔离 DDH和 MyBase都可以提供宿主机级别物理隔离，可以独占资源，可以开放更多接口 , 同时杜绝 多租户间 干扰 。 2、安全合规：在完备的隔离基础之上，开放更多数据库权限和 OS权限 。 3、资源灵活部署和调度 创建 ECS实例、从共享宿主机迁移 ECS实例至专有宿主机或在专有宿主机之间迁移 ECS实例时，若您不指定专有宿主机，系统将自动帮您选择专有宿主机部署实例。 针对于初始部署数据库实例时，提 供紧凑型和均衡型两种方式将数据库实例分不到不同的主机上。 4、超配 降本 DDH和 MyBase组合的方式可以实现资源自定义 CPU内存 配比以及CPU超分 ，可以降低单 ECS实例以及云数据库实例的部署成本。
本实践选择创建密钥对，信息填写完成后，单击确认会自动生成一个可以下载到本地 的.pem文件，里面是 RSA私钥内容（公钥存储在云上）。步骤6 密钥对创建完成之后，再次回到 ECS购买配置页面，在密钥对右侧单击刷新按钮，便 可以选择刚刚创建的密钥对。文档版本：20220414 15 基于 DDH+MyBase降本合规最佳实践 超分型 DDH上...
云速搭部署云安全中心最佳实践
本实践通过云速搭实现云安全中心的部署。
云安全中心计费方式详见：https://help.aliyun.com/document_detail/57357.html 文档版本：20211105 11 云速搭部署云安全中心 产品支持 步骤11 单击右上角的保存，填写应用名称。文档版本：20211105 12 云速搭部署云安全中心 产品支持 2.2.部署应用 步骤1 应用保存完成后，单击右上角的部署应用。步骤2 等待校验成功，单击...
云速搭部署安全组最佳实践
本实践通过云速搭实现安全组和企业安全组的部署。
修改完成后如下图所示：文档版本：20211117 13 云速搭部署安全组 CADT部署安全组应用架构 步骤11 参考以上步骤，扩展成如下架构图：文档版本：20211117 14 云速搭部署安全组 CADT部署安全组应用架构 步骤12 单击右上角的保存，填写应用名称。2.2.部署应用 步骤1 应用保存完成后，单击右上角的部署应用。步骤2 弹出如下校验...
RAM用户集成企业AD FS身份认证
介绍阿里云RAM集成Windows AD FS，使用企 业AD对员工的身份认证及管理功能，配置RAM 用户与AD用户的映射关系，实现企业员工使用企 业AD域账号以单点登录（SSO）的方式访问阿里 云控制台。 解决问题 1.Windows AD域部署。 2.Windows AD证书服务及Web服务部署。 3.Windows AD FS部署。 4.阿里云用户SSO配置。 5.AD FS集成RAM用户SSO。 产品列表 l访问控制RAM l专有网络VPC l云服务器ECS
（https://bpstudio.console.aliyun.com/）步骤2 基于模版快速配置资源 https://bpstudio.console.aliyun.com/#/bpStudio/topo?TemplateId=BUBNBNUA28ZS MDVL，双击ECS在右边栏填写密码后，保存应用，点击部署 文档版本：20220617 5RAM用户集成企业ADFS身份认证 创建及配置ECS实例 步骤3 若从新建空白应用开始创建架构图，...
DBS通过IPSec VPN备份自建数据库
场景描述 客户业务系统部署在IDC或者公有云环境，对业 务数据有云上备份需求。在客户交流过程中，基 于数据高可用和灾备需求，要求将数据备份至阿 里云OSS的存储空间，同时备份数据流基于 IPSecVPN/专线进行安全传输。 解决的问题 自建数据库的云上/跨云备份需求 DBS提供了完善的备份机制和API OSS的分层存储机制降低备份集储存成本 基于IPSecVPN/专线进行安全传输。 产品列表 VPC，ECS，DBS，VPN网关，OSS
SourceEndpointInstanceI vpc-bp1XXXX1v 数据库实例 ID，本例中填 D 写 ecs-magento所关联到 的 VPC ID SourceEndpointIP 192.168.100.7 数据库连接地址，ecs-magento的私网 IP地 址。SourceEndpointPort 3306 数据库端口 SourceEndpointUserNam root 数据库实例用户名 e SourceEndpointPassword 123456 数据库实例密码 ...
自建K8S迁移镜像、应用至阿里云ACK最佳实践
云原生技术K8S以其易管控，自动化操作，自修复等特点充分满足了企业的需求，越来越多的企业都加入容器化这个队伍中。但随着技术的更新迭代，自建的K8S相关的容器镜像服务、集群管理、稳定性保障也让企业IT人员感觉到压力，所以上云成了一些企业的选择，将底层的IAAS基础设施和K8S的基础PASS能力交给阿里云来管理，企业本身抽出更多精力聚焦业务的创新。针对以上需求通过使用image-syncer、velero来介绍如何平滑、便捷的迁移自建的K8S镜像和应用至阿里云容器镜像服务和ACK。 针对以上需求场景通过使用image-syncer、velero来介绍如何平滑、便捷的迁移自建的K8S镜像和应用至阿里云容器镜像服务和ACK；本文通过使用河源的ECS自建K8S集群和Harbor镜像仓库来模拟IDC环境
同样，我们先在 harbor下 test-ack项目，上传测试镜像，如下图：创建迁移目标 在弹出页面按如下填写：18 文档版本：20200525 自建 K8S迁移镜像、应用至阿里云 ACK 在列表中可以看到创建好的远端仓库：配置同步规则 19 文档版本：20200525 自建 K8S迁移镜像、应用至阿里云 ACK 主要参数配置：①复制模式：push-based是把镜像...
基于HBR云上统一备份
场景描述 混合云备份（简称HBR）是一种简单易用且高性价 比的在线备份服务，可以为阿里云ECS，NAS，OSS 以及自建机房内的各类数据提供安全，高效的保护。 本文介绍如何通过HBR对云上数据进行统一备份管 理。 解决问题 1.备份阿里云云上数据。 2.备份数据中心数据。 适用云资源 ECS文件系统 NAS文件 OSS文件 ECS上自建的MySQL、Oracle、SQLServer数据库 ESC上自建的SAPHANA数据库 产品列表 1.HBR备份服务 2.云服务器ECS 3.文件系统NAS 4.对象存储OSS 云上统一备份 云下统一备份 上云备份 备份上云
文档版本：20210402 64 HBR云上统一备份 ECS自建SAP HANA备份 步骤2 填写 ECS内网地址和 HANA实例 ID。步骤3 输入用户名和密码，单击 Finish。文档版本：20210402 65 HBR云上统一备份 ECS自建SAP HANA备份 步骤4 HANA数据库连接成功。步骤5 打开 SQL窗口，输入以下 SQL 语句，创建 schema和 table。文档版本：20210402 66 ...
超级计算集群实现自然语言处理训练
场景描述 本方案适用于自然语言训练场景，使用神龙 GPU云服务器（SCCGN6）+CPFS进行NLP的 训练，采用Bert模型。这里不使用容器，直接 使用裸机进行NLP的Bert训练，使用飞天AI加 速训练工具可以有效提升多机多卡的训练效率。 解决问题 使用神龙GPU云服务器搭建NLP训练环 境 使用SCC的RDMA网络 使用CPFS存储训练数据 使用飞天AI加速训练工具加速训练 产品列表 神龙GPU云服务器（SCCGN6） SCC超级计算集群 CPFS共享存储
步骤4 在创建集群页面，填写相关信息，并单击确定。4企业上云实践 基于超级计算集群的自然语言处理AI训练 步骤5 单击集群（scc-ai-training）操作列下的扩容。步骤6 在自定义购买模式下，配置相关参数。参考下表，配置基础配置相关内容。类别 配置项 说明 基础配置 计费方式 按量付费 地域 华东2（上海）可用区G 实例 ...
混合云使用Ali-Perseus
场景描述 本文介绍了混合云场景中，自建 Kubernetes服务，线下集群+云上弹性扩 展阿里云GPU服务实例+飞天AI加速工 具，并采用阿里云CPFS存储，运行AI训 练+AI推理作业的操作步骤。 解决问题 1.利用云企业网打通两个地域的VPC， 自建Kubernetes集群 2.使用飞天AI加速工具运行训练和推理 作业 3.使用CPFS存储共享数据 产品列表 云企业网CEN GPU云服务器 并行文件存储CPFS 文件存储NAS
12 混合云使用飞天AI加速工具 创建云企业网实例 步骤8 在加载网络实例页面，填写相关信息，并单击确定。13 混合云使用飞天AI加速工具 创建云企业网实例 步骤9 操作成功，单击完成。说明：因为我们这里的云企业网实例，涉及到了华北 2 和华东 2两个地域，属于跨 地域的情况，所以需要购买带宽包才能正常使用。步骤10 选择...
Openstack迁移DDH
场景描述 在线下IDC中，很多用户使用OpenStack构建云环境，本 文介绍如何将线下IDC中基于OpenStack构建的云服务器 迁移到阿里云专有宿主机（DDH）上，从而实现业务平滑 上云的同时，显著降低成本。 解决问题 1.如何将OpenStack中的云服务器迁移 DDH上。 2.如何使用DDH构建云上环境。 产品列表 专有宿主机DDH 对象存储OSS 服务器迁移中心SMC 专有网络VPC
填写用户信息。配置项 说明 用户账号信息[登录名称][显示名称]ddhuser ddhuser 访问方式 勾选控制台密码登录和编程访问。控制台密码 勾选自定义登录密码，并设置符合要求的登录密码。要求重置密码 勾选无需重置。多因素认证 勾选不要求。文档版本：20200312（发布日期）49 Openstack迁移DDH 上传镜像并导入 创建完成后如下...
- 产品推荐
- 这些文档可能帮助您