自建Hive数据仓库跨版本迁移到阿里云Databricks数据洞察
场景描述 客户在IDC或者公有云环境自建Hadoop集群构建数据仓库和分析系统，购买阿里云Databricks数据洞察集群之后，涉及到数仓数据和元数据的迁移以及Hive版本的订正更新。 方案优势 1. 全托管Spark集群免运维，节省人力成本。 2. Databricks数据洞察与阿里云其他产品（OSS、RDS、MaxCompute、EMR）进行深度整合，支持以这些产品为数据源的输入和输出。 3. 使用Databricks Runtime商业版引擎相比开源Spark性能有3-5倍的提升。 解决问题 1. Hive数仓数据迁移OSS方案。 2. Hive元数据库迁移阿里云RDS方案。 3. Hive跨版本迁移到Databricks数据洞察使用Delta表查询以提高查询效率。
文档版本信息 文本信息 属性 内容 文档名称 自建 Hive数据仓库跨版本迁移到阿里云 Databricks数据洞察 文档编号 214 文档版本 V1.0 版本日期 2021-04-25 文档状态 外部发布 制作人 加亮 审阅人 霍彦文、协列 文档变更记录 版本编号 日期 作者 审核人 说明 V1.0 2021-04-25 加亮 霍彦文、协列 创建 文档版本：20210425 I 自...
自建ElasticSearch迁移阿里云
场景描述 以ElasticSearch为例，演示搭建模拟业务系统、 VPN网关和IPSecVPN隧道，介绍如何通过快照 的方式，将ElasticSearch索引数据安全备份到 阿里云OSS存储空间，以及介绍如何将备份在 OSS的快照仓库恢复到阿里云ElasticSearch实 例，进一步达到ElasticSearch迁移上云的目的。 解决的问题 自建ElasticSearch的云上/跨云备份需求。 自建ElasticSearch迁移到阿里云 ElasticSearch服务实例。 产品列表 VPC，ECS，VPN网关，OSS，阿里云ElasticSearch，云速搭CADT
本步骤中需要在客户 IDC的路由器（本实 践方案用 VPC的路由表模拟）添加杭州 OSS服务的网段：100.118.28.0/24 文档版本：20210802 22 自建 ElasticSearch快照备份 OSS 创建 IPSec VPN隧道 路由条目都添加完成后，界面如下所示：2.5.连通性验证 通过 SSH登录到在 1.4节创建的 Magento系统后台界面并执行下面的 ping命令，...
云速搭部署风险识别SAF
通过云速搭 CADT 实现风险识别服务的部署，并可以基于已有的应用，多次部署，方 便快捷。
文档版本：20220113 8 云速搭部署风险识别SAF最佳实践 CADT部署ADB应用 步骤8 在导出价格清单对话框中，CADT会为您计算出应用所含资源的价格，包括原价、优 惠以及最终的实付价格，在这里您需要确认下所购风险识别服务的原价、优惠以及实 付价格是否正确，确认无误，再单击下一步：确认订单。步骤9 在确认订单对话框中，...
数据库异地灾备
场景描述 适用于不满足于单地域，对数据可靠性 （RPO）和服务可用性（RTO）要求更高 的，希望防范断电、断网等机房故障，抵 御地震、台风等自然灾害，具备异地容灾 备份恢复能力的客户业务场景。 解决问题 1.实时备份，RPO达到秒级 2.表级恢复，故障恢复时间大大缩短 3.长期归档，自动管理备份生命周期 4.异地灾备，构建数据库灾备中心 产品列表 专有网络VPC 云服务器ECS 弹性公网IP（EIP） 负载均衡SLB 云数据库RDSMySQL 数据库备份服务DBS 对象存储服务OSS 数据湖分析服务DLA 数据管理服务DMS 数据传输服务DTS
详 细 步 骤 请 参 考 使 用 文 档《资 源 验 证 及 部 署》：https://help.aliyun.com/document_detail/186135.html 全部资源部署完成将耗时 10分钟左右，请耐心等待。步骤4 部署完成后通过应用>部署状态查看资源部署状态。文档版本：20220207 10 数据库异地灾备 使用云速搭部署基础资源 可以单击资源名称的超链接，跳转...
企业多账号环境下的安全资源统一管控最佳实践
某地产公司在上海、杭州设有两个分公司，公司使用阿里云支撑各分公司的 IT 业务系统，这些系统由各分公司独立负责，包括独立负责云上业务账号的创建、员工权限的分配管理、资源的购买、IT 风险的管控、安全管理等。由于公司业务发展较快，各分公司创建了非常多的业务账号来承载新的业务，每个业务账号独立管理，带来了非常大的管理问题。人员权限管理混乱，离职员工在云上的身份梳理不清难以及时清理造成极大的安全隐患；账号权限过大、使用弱密码可能造成账号被盗数据泄露；公司内部缺乏统一的合规基线和安全管控，各业务系统各自为政，数据泄露、业务中断、安全入侵风险升级。 为了提升云上的管控效率和安全性，总公司成立新的信息安全中心和阿里云对接。信息安全中心的定位是统一采购安全产品，集中保障云上资源的安全性。
文档版本信息 文档版本信息 文本信息 属性 内容 文档名称 企业多账号环境下的安全资源统一管控 文档编号 234 文档版本 V1.1 版本日期 2022-02-24 文档状态 对外发布 制作人 嘉辽 审阅人-文档变更记录 版本编号 日期 作者 审核人 说明 V1.0 2021-11-24 嘉辽、知意、凝岚 天裴 创建 V1.1 2022-02-11 嘉辽 游士 增加 CADT模板...
微服务引擎的线上流量治理
随着业务不断创新，微服务架构及数字化转型不断落地，在这个过程中，大量企业采用了开源的组件构建了微服务，比如有开源微服务全家桶之称的Spring Cloud体系或Apache Dubbo等，微服务的好处之一，在于快速迭代，如何在迭代过程中保障线上流量不受损？ 开源产品无运维工具，常常需要投入较大的运维人力和成本。 本实践将重点介绍如何快速集成主流开源微服务框架，实现业务零改造，解决开源框架在生产落地过程中的痛点，例如无损上下线、标签路由等，并通过托管微服务开源组件（API网关、注册中心、配置中心等）的服务，提供白屏化监控告警、容灾、宕机重启、扩缩容等能力，帮助企业释放业务无关的运维成本，聚焦业务本身的运维和发展。 方案优势 快速集成：通过JavaAgent技术实现Sping Cloud和Dubbo框架可以实现业务零改造接入。 免运维：托管微服务依赖开源中间件的服务，提供白屏化监控告警、容灾、宕机重启、扩缩容等能力，帮助我们客户释放业务无关的运维成本，聚焦自身业务本身的运维和发展。 开源增强：提供开源框架在生产落地过程中的痛点，例如应用无损上下线/金丝雀发布/南北+东西流量打通等，帮助客户的业务提高自身SLA和降低自研成本。
应用部署 如之前架构图所示，应用都部署于容器服务 ACK里，本章节，将通过 kubectl进行手 动部署，在真实生产环境中，常常采用 CICD的方式，进行应用多环境的快速构建和 发布，感兴趣的同学，可参考最佳实践《基于 K8S多集群隔离环境下的 DevOps实 现》https://bp.aliyun.com/detail/165 步骤9 进入集群控制台，进入 cloud...
RAM用户集成企业AD FS身份认证
介绍阿里云RAM集成Windows AD FS，使用企 业AD对员工的身份认证及管理功能，配置RAM 用户与AD用户的映射关系，实现企业员工使用企 业AD域账号以单点登录（SSO）的方式访问阿里 云控制台。 解决问题 1.Windows AD域部署。 2.Windows AD证书服务及Web服务部署。 3.Windows AD FS部署。 4.阿里云用户SSO配置。 5.AD FS集成RAM用户SSO。 产品列表 l访问控制RAM l专有网络VPC l云服务器ECS
部署架构图 RAM用户集成企业ADFS身份认证 场景描述 介绍阿里云RAM集成WindowsADFS，使用企 业AD对员工的身份认证及管理功能，配置RAM 用户与AD用户的映射关系，实现企业员工使用企 业AD域账号以单点登录（SSO）的方式访问阿里 云控制台。解决问题 1.WindowsAD域部署。2.WindowsAD证书服务及Web部署。3.WindowsADFS部署。4....
云速搭CADT部署VMware服务
本方案适用客户云下使用VMware环境，在云上希望继续使用VMware环境，包括业务维护和扩容等，不希望改变云上使用环境。
对外发布 制作人 阿瑟 审阅人 飞想 文档变更记录 版本编号 日期 作者 审核人 说明 V1.0 2022-05-20 阿瑟 飞想 创建 文档版本：20220520 I 云速搭CADT部署VMware服务 目录 目录 文档版本信息.I 法律声明.II 目录.1 前置条件.2 最佳实践概述.3 业务规划.6 1.云速搭架构设计.9 1.1.参考模版设计.9 1.2.修改产品参数.10 1.3....
新零售商超基于Serverless服务化改造
某零售商超行业龙头企业，主要业务涵盖购物中心、大卖场、综合超市、标准超市、精品超市、便利店、无人值守智慧商店等零售业态，涉及全渠道零售、仓储物流、餐饮、消费服务、数据服务、金融业务、跨境贸易等领域。为了持续支持业务高速且稳定地发展，其在快速上云后，将核心业务改造为全Serverless架构的中台模式，采用函数计算 + API网关 + 表格存储OTS 作为计算网络存储核心，弹性支撑日常和大促峰谷所需资源，轻松支撑618/双11/双12大促。 核心价值 l 全 Serverless 架构：FC + API 网关 + OTS Serverless 解决方案。 l 弹性高可用：毫秒级弹性扩容、充足的资源池水位、跨可用区高可用。 l 敏捷开发免运维：函数式极简编程可专注于业务创新，无采购和部署成本、提供监控报警等完备的可观测能力。
配置数据迁移 DTS：支持关系型数据库、NoSQL、大数据(OLAP)等数据源，集数据迁移、订阅及实 时同步功能于一体，能够解决公共云、混合云场景下，远距离、毫秒级异步数据传输 难题。其底层基础设施采用阿里双 11 异地多活架构，为数千下游应用提供实时数据 流，已在线上稳定运行 6年之久。详见：...
ACK容器平台集群安全控制
场景描述 本方案实践主要是通过一些实践示例来介绍 用户对于在阿里云上使用Kubernetes集群服 务的容器平台安全管控的实践验证与使用建 议。 方案优势 容器集群部署快捷 授权与安全策略配置方便 丰富的安全控制实践介绍 解决问题 容器集群API Server的安全访问控 制 容器服务多租户场景下的授权管理 容器中的敏感信息数据的存储 容器服务集群安全策略配置管理 产品列表 容器服务Kubernetes版 负载均衡SLB 专有网络VPC 访问控制RAM
X509证书 Kubernetes提供了多种安全认证机制，主要有 CA认证（X509客户端证书）、静 态 Token 认证和静态密码 Base 认证等,TLS 双向认证也叫作双向数字证书认 证;Kubernetes使用 X509证书的 CN(Common Name)以及 O(Organization)字段 对应 Kubernetes 中的 user 和 group，将认证(Authentication)和 RBAC 授权...
云管对接实现已有节点加入ACK集群
企业内部伴随着业务量增加，对 ACK 集群扩容属于高频操作，部分企业有一些特殊的 要求，例如节点规格需要灵活指定，系统需要重新初始化从而符合企业内部规范等。 直接通过节点池扩容显得不够灵活，例如缺少库存校验等能力，扩容有可能失败，扩 容完成后需要手动修改节点的配置，自动化程度较低，增加了运维人员的负担。
ACK集群 文档版本信息 文档版本信息 文本信息 属性 内容 文档名称 云管对接实现已有节点加入 ACK集群最佳实践 文档编号 320 文档版本 V1.0 版本日期 2022-11-22 文档状态 外部发布 制作人 嘉辽 审阅人-文档变更记录 版本编号 日期 作者 审核人 说明 V1.0 2022-11-22 嘉辽 创建 文档版本：20221122 I 云管对接实现已有节点...
DTS数据同步集成MaxCompute数仓
场景描述 本文Step by Step介绍了通过数据传输服务 DTS实现从云数据库RDS到MaxCompute的 数据同步集成，并介绍如何使用DTS和 MaxCompute数仓联合实现数据ETL幂等和数 据生命周期快速回溯。 解决问题 1.实现大数据实时同步集成。 2.实现数据ETL幂等。 3.实现数据生命周期快速回溯。 产品列表 MaxCompute 数据传输服务DTS DataWorks 云数据库RDS MySQL 版
文档版本信息 文档版本信息 文本信息 属性 内容 文档名称 DTS数据同步集成 MaxCompute数仓最佳实践 文档编号 146 文档版本 V1.1 版本日期 2022-01-26 文档状态 对外发布 制作人 懿弘、洁谦 审阅人 李锐、游圣 文档变更记录 版本编号 日期 作者 审核人 说明 V1.0 2020-02-28 懿弘 李锐、游圣 创建 V1.1 2020-02-29 筱晖 懿弘...
基于MyBase构建自主可控数据库和高弹性应用实践
一些企业级客户上云前，会重点关心数据库是否自主可控，包括云资源独享、自主可运维、获取OS 权限等特点，同时又要兼顾数据库合规性、安全性和高性能的要求；并力求在业务弹性下合理利用云产品降低数据和应用成本，弹性地支持业务。本实践为此类用户提供相关实践参考。
基于MyBase构建自主可控数据库和高弹性实践 业务架构 场景描述 一些企业级客户上云前，会重点关心数据库是否自主可 控，包括云资源独享、自主可运维、获取 OS权限等特点，同时又要兼顾数据库合规性、安全性和高性能的要求；并 力求在业务弹性下合理利用云产品降低数据和应用成 本，弹性地支持业务。实践收益 数据库自主可控...
基因计算工作流
场景描述 适合利用容器服务Kubernetes版上的工作流 引擎进行大规模基因测序的场景。阿里云工作流 引擎基于开源项目Argo实现，支持并发、循环、 重试等多种执行策略。典型的基因计算过程会把 数据分批进行计算，按照规定好的步骤依次完成 计算，这符合工作流的特点：多层次，有向无环 图。 解决问题 1.基因计算如何构建工作流 2.容器服务Kubernetes版结合 共享文件存储NAS提供数据 服务 3.构建单POD工作流 产品列表 容器服务Kubernetes版 文件存储NAS
说明：您可以登录阿里云控制台，并前往实人认证页面（https://account.console.aliyun.com/v2/#/authc/home），查看是否已经完成实名 认证。阿里云账户余额大于 100元。说明：您可以登录阿里云 控制台，并前往账户总览页面（https://expense.console.aliyun.com/#/account/home），查看当前账户余额。阿里云账号下已开通...
云速搭CADT部署PolarDB-X 1.0
通过云速搭 CADT 实现云原生分布式数据库 PolarDB-X 1.0 的部署。
详见：https://www.aliyun.com/product/developerservices/cadt 云原生分布式数据库 PolarDB-X：PolarDB-X 是由阿里巴巴自主研发的云原生分 布式数据库，具备水平扩容、金融级高可用、HTAP混合负载、兼容 MySQL 等 重要特性，专注解决超高并发吞吐、海量数据存储、大表瓶颈等数据库瓶颈难题，历经各届天猫双 11及阿里云各...
基于弹性供应组构建大数据分析集群
场景描述 基于弹性供应组（APG）搭建spark计算集 群，提供一键开启跨售卖方式、跨可用区、 跨实例规格的计算集群交付模式的实践。 方案优势 1.超低成本：跨售卖方式提供计算实 例，按秒计费，可全部使用spot实例 交付，最高可省90%成本。 2.稳定可靠：跨可用域、跨实例规格， 降低spot被集体释放的风险；自动托 管，分钟级巡检，动态保证集群的算 力。 3.快速交付：单次可在5分钟内交付 2000个实例。 4.多策略组合：可分别指定spot和按量 实例的交付策略，以及差额补足的策 略，包括成本最低、打散和折中。 解决问题 1.大规模计算集群成本高。 2.创建ECS实例方式单一，无法跨计费 方式、可用区及规格等核心参数。 3.当可用区资源紧张，无法自动保证基于 spot类型的稳定算力。 产品列表 专有网络VPC 云服务器ECS
属性 内容 文档名称 基于弹性供应组构建大数据分析集群最佳实践 文档编号 162 文档版本 V1.0 版本日期 2020-06-19 文档状态 外部发布 制作人 厉博 审阅人-文档变更记录 版本编号 日期 作者 审核人 说明 V1.0 2020-06-19 厉博-创建 文档版本：20200619 I 基于弹性供应组构建大数据集群分析 前言 前言 概述 阿里云原生交付 ...
EHPC分子动力学最佳实践
本文档以一个简单的分子动力学算例，介绍阿里云EHPC分子动力学最佳实践。
您可以登录阿里云控制台，并前往实人认证 页面（https://account.console.aliyun.com/v2/#/authc/home），查看是否已经完成实 名认证。阿里云账户余额大于 100 元。您可以登录阿里云控制台，并前往账户总览页面（https://expense.console.aliyun.com/#/account/home），查看当前账户余额。阿里云账号下已开通以下阿里云服务...
多账号下企业分账
场景描述 财务分账，是根据企业的成本中心，将云上资源的成本划分到给各个项目组/业务部门；助力企业快速梳理云上成本结构，搭建复杂组织架构下的成本关系，便捷地进行财务和云上成本的管理。 大型企业或集团公司，由于组织架构复杂，业务复杂等原因，通常拥有多个阿里云账号来管理规模庞大的云上资源。针对云上资源，如何建立有效的分账方案，是财务关注的重要问题。 解决问题 解决CIO/CTO最关心的云上IT治理，IT成本核算等问题。 弄清楚企业内各部门成本及云上IT成本结构。 让CIO/CTO准确地掌握云上资源成本情况，清楚业务与成本的关系。 让采购/运维轻松搞定每月的IT成本汇报。
文档版本：20210128 23 多账号下企业分账最佳实践 搭建模拟资源环境 详 细 步 骤 请 参 考 使 用 文 档《资 源 验 证 及 部 署》：https://help.aliyun.com/document_detail/186135.html 步骤6 部署完成后查看资源部署状态。可以单击资源名称的超链接，跳转对应资源的控制台。（部署成功后，可随时通过应用>部署状态来打开...
- 产品推荐
- 这些文档可能帮助您