自建Hive数仓迁移到阿里云EMR
场景描述 客户在IDC或者公有云环境自建Hadoop集群构 建数据仓库和分析系统，购买阿里云EMR集群之 后，涉及到将数据仓库和Hive元数据的数据库迁 移上云。目前主流Hive数据仓库迁移场景为1.x 版本迁移到阿里云EMR(Hive2.x版本），涉及到 数据订正更新步骤。 解决的问题 Hive数据仓库的数据迁移方案 Hive元数据库的迁移方案 Hive跨版本迁移后的数据订正 产品列表 E-MapReduce，VPC，ECS，OSS，VPN网关。
付费模式：按使用流量 带宽：100 Mbps 说明：（1）在您业务商用过程中，建议选用弹性公网 IP和共享带宽包、共享流量包的组合降低公网流量使 文档版本：20210721 6 自建Hive数据仓库跨版本迁移到阿里云 EMR 基础环境搭建 用成本；（2）在环境搭建过程中分配公网 IP地址仅 用于 SSH登录和必要的软件包下载，在环境搭建完 成...
数字证书管理服务（原SSL证书）
阿里云为您提供证书服务，在云上签发DigiCert、GlobalSign、GeoTrust、CFCA、WoSign证书，实现网站HTTPS化，使网站可信，防劫持、防篡改、防监听。并对云上证书进行统一生命周期管理，简化证书部署，一键分发到云上产品。
提升搜索引擎排名.数据传输期间，建立起安全信息传输加密通道，保证信息传输的机密性。保护账户安全，有效防止信息篡改，避免信息泄露.信息防篡改/防泄露.提升搜索引擎排名.Web应用防火墙.推荐搭配使用.网站/APP/小程序HTTPS加密.网站/APP/小程序HTTPS加密.<产品聚合页.选购SSL证书.选购客户端证书.数字证书管理服务集云上...
来自：
云产品
Dubbo应用上云
场景描述 本最佳实践适用于企业自建 Dubbo 应用上云， 应 用采用 docker 方式部署， 降低部署成本。同时利 用 MSE 提供 Zookeeper 服务注册管理。 通过阿 里云的 ARMS 和 AHAS 服务提供应用监控和服务 限流管理，简化运维并提供服务的全生命周期管 理。 解决问题 1. 自建 dubbo 应用迁移上阿里云。 2. 应用部署在容器内降低成本。 3. 通过 MSE 提供 ZK 服务，提高稳定性。 4. 通过 ARMS/AHAS 提供监控和服务限流能力 产品列表 容器服务 Kubernetes 版（ACK） 微服务引擎（MSE） 关系数据库服务（RDS） 应用高可用服务（AHAS） 应用实时监控服务（ARMS）
Dubbo应用上云 最佳实践 部署架构 场景描述 本最佳实践适用于企业自建 Dubbo应用上云，应 用采用 docker方式部署，降低部署成本。同时利 用 MSE提供 Zookeeper服务注册管理。通过阿 里云的 ARMS和 AHAS服务提供应用监控和服务 限流管理，简化运维并提供服务的全生命周期管 理。解决问题 1.自建 dubbo应用迁移上阿里云。2....
人工智能平台 PAI
阿里云人工智能平台 PAI 涵盖交互式建模、可视化建模、分布式训练到模型在线部署全流程；快速搭建人工智能推荐系统；深度学习模型训练速度提升数十倍；减少50%GPU成本
在CSDN信息流推荐中使用PAI推荐方案，内容搜索推荐CTR提升80%.人工智能平台 PAI是面向开发者和企业的AI工程化平台，提供了覆盖数据准备、模型开发、模型训练、模型部署的全流程服务.人工智能平台 PAI产品功能.在数据准备阶段，PAI-iTAG 提供智能化数据标注服务，支持图像、文本、视频、音频等不同类型数据标注，支持多模态...
来自：
云产品
容器Swarm集群向ACK集群灰度迁移
场景描述 随着K8S生态的完善，越来越多的客户需要从 Swarm集群迁移向ACK集群 解决问题 1.迁移过程中维持业务的延续性 2.迁移过程业务高可用 3.迁移过程可灰度 4.迁移过程可回滚 5.迁移进度可把控 产品列表 专有网络VPC 云数据库RDSMySQL 容器服务ACK 云服务器ECS
为了使容器集群弹性伸缩的容器启动后就能正常 工作，需要使用配置后的镜像，创建一个镜像仓库用来存放自定义镜像。操作步骤 步骤1 搜索“容器镜像服务”，进入控制台页面。步骤2 创建命名空间，本例取名 mydockerstore。步骤3 创建镜像仓库。文档版本：20190401 10 容器 Swarm集群向 ACK集群灰度迁移最佳实践 创建数据库 ...
湖仓一体架构EMR元数据迁移DLF
通过EMR+DLF数据湖方案，可以为企业提供数据湖内的统一的元数据管理，统一的权限管理，支持多源数据入湖以及一站式数据探索的能力。本方案支持已有EMR集群元数据库使用RDS或内置MySQL数据库迁移DLF，通过统一的元数据管理，多种数据源入湖，搭建高效的数据湖解决方案。
步骤2 通过搜索关键字找到“EMR元数据迁移 DLF”模板，单击基于应用新建。步骤3 由于元数据库使用了独立的 RDS，需要先创建 RDS再部署 EMR，故先不部署 EMR，先取消 EMR资源部署。文档版本：20220125 3 湖仓一体架构 EMR元数据迁移DLF 基础环境搭建 步骤4 安全组增进开放 3306端口（这里测试方便全部开放，建议仅针对 VPC...
云速搭部署 Elasticsearch 应用
本实践通过云速搭实现一个 DTS+Elasticsearch 的搜索引擎架构，构建一个快速分析和检索 业务数据的系统。
更多信息，请参见：http://www.aliyun.com/product/bigdata/product/elasticsearch 文档版本：20211029 3 云速搭部署 Elasticsearch应用 云速搭架构设计入门 云速搭架构设计入门 方案架构 通过云速搭实现一个 DTS+Elasticsearch的搜索引擎架构，构建一个快速分析和检索 业务数据的系统。文档版本：20211029 4 云速搭部署 ...
自建ElasticSearch迁移阿里云
场景描述 以ElasticSearch为例，演示搭建模拟业务系统、 VPN网关和IPSecVPN隧道，介绍如何通过快照 的方式，将ElasticSearch索引数据安全备份到 阿里云OSS存储空间，以及介绍如何将备份在 OSS的快照仓库恢复到阿里云ElasticSearch实 例，进一步达到ElasticSearch迁移上云的目的。 解决的问题 自建ElasticSearch的云上/跨云备份需求。 自建ElasticSearch迁移到阿里云 ElasticSearch服务实例。 产品列表 VPC，ECS，VPN网关，OSS，阿里云ElasticSearch，云速搭CADT
文档版本：20210802 13 自建 ElasticSearch的索引快照备份 OSS 基础环境搭建 步骤5 Index Pattern创建完成后，查看索引信息，可以看到日志信息已经保存在 ElasticSearch的索引中，使用者可以尝试搜索某个 IP地址或者其他关键字来验证搜 索功能。文档版本：20210802 14 自建 ElasticSearch的索引快照备份 OSS 基础环境搭建 ...
CDH迁移升级CDP最佳实践
当前 CDH 免费版停止下载，终止服务，针对需要企业版服务能力并且CDH 升级过程对业务影响较小的客户，通过安装新的 CDP 集群，将现有数据拷贝至新集群，然后将新集群切换为生产集群，升级过程没有数据丢失风险，停机时间较短，适合大部分互联网客户升级使用。
如果“root.default”不是预期的默认 队列，则有两种可能的方法：使用setDefaultQueue 策略更 改“root.default”，然 后 应 用 defaultQueue。使用自定义策略并将策略字符串设 置为目标队列。3.3.4.调度程序迁移的限制 将 Fair Scheduler 配置转换为 Capacity Scheduler 配置有一些硬性限制，因为这两个 调度程序并不等效...
自建Hive数据仓库跨版本迁移到阿里云Databricks数据洞察
场景描述 客户在IDC或者公有云环境自建Hadoop集群构建数据仓库和分析系统，购买阿里云Databricks数据洞察集群之后，涉及到数仓数据和元数据的迁移以及Hive版本的订正更新。 方案优势 1. 全托管Spark集群免运维，节省人力成本。 2. Databricks数据洞察与阿里云其他产品（OSS、RDS、MaxCompute、EMR）进行深度整合，支持以这些产品为数据源的输入和输出。 3. 使用Databricks Runtime商业版引擎相比开源Spark性能有3-5倍的提升。 解决问题 1. Hive数仓数据迁移OSS方案。 2. Hive元数据库迁移阿里云RDS方案。 3. Hive跨版本迁移到Databricks数据洞察使用Delta表查询以提高查询效率。
深度融合 Databricks数据洞察与阿里云其它产品（例如，OSS、MongoDB、Elasticseach、RDS和 MaxCompute等）进行了深度整合，支持以这些产品作为 Spark计算引 擎的输入源或者输出目的地。文档版本：20210425 VI 自建 Hive数据仓库跨版本迁移到阿里云 Databricks数据洞察 前置条件 前置条件 为了顺利完成本实践，您需要提前...
云原生大数据计算服务MaxCompute
阿里云云原生大数据计算服务MaxCompute是面向分析的企业级云数仓，作为一体化大数据智能计算平台ODPS的大规模批量计算引擎，MaxCompute以 Serverless 架构提供快速、全托管的在线数据仓库服务，使您经济高效的分析处理海量数据，进行敏捷的业务洞察。
成本低，数据处理时间显著提升 菜鸟智能物流分析引擎是基于搜索架构建设的物流查询平台，日均处理包裹事件几十亿，承载了菜鸟物流数据的大部分处理任务.现有数据规模的处理需求，整体硬件资源成本下降60%.更低成本的整体硬件资源.全量数据处理时间极大被压缩，2亿的记录，端到端只需要3分钟.更快的全链路处理速度.一个系统...
来自：
云产品
云消息队列 Kafka 版
云消息队列 Kafka 版是阿里云基于Apache Kafka构建的大数据消息中间件，广泛用于日志收集和分析、数据处理等场景。可提供全托管服务，用户无需部署运维，更专业、更可靠、更安全。
而云消息队列 Kafka 版以及 Storm/Samza/Spark 等流计算引擎的出现，可以根据业务需求对数据进行计算分析，最终把结果保存或者分发给需要的组件.由于数据产生非常快且数据量大，需要非常高的可扩展性；可对接开源 Storm/Samza/Spark 以及 EMR、Blink、StreamCompute 等阿里云产品；实时计算 Flink版.云消息队列 MQ.应用实时...
来自：
云产品
Elasticsearch
阿里云检索分析服务 Elasticsearch 版是100%兼容开源的分布式检索、分析套件。提供ELK等开源全托管的产品服务能力。为结构化/非结构化数据提供低成本、高性能及可靠性的检索、分析平台级产品服务。具备读写分离、存算分离、弹性伸缩、智能化运维、免费的X-Pack高级商业特性等产品特性。
「搜索上云」全新体验，像使用水电般简单.「Elastic Stack 实战手册」开发者共创书籍正式版首发.「快狗打车」服务几十万司机的实时地理位置检索服务.Serverless版支持创建企业级应用，平均可节省50%成本.8.9版本发布，兼容开源最新版本，在向量检索、NLP方面具备更优体验.开发者规格上线，成本下降60%.8.5版本机器学习功能...
来自：
云产品
- 产品推荐
- 这些文档可能帮助您