EMR集群安全认证和授权管理
场景描述 阿里云EMR服务Kafka和Hadoop安全集群使 用Kerberos进行用户安全认证，通过Apache Ranger服务进行访问授权管理。本最佳实践中以 Apache Web服务器日志为例，演示基于Kafka 和Hadoop的生态组件构建日志大数据仓库，并 介绍在整个数据流程中，如何通过Kerberos和 Ranger进行认证和授权的相关配置。 解决问题 1.创建基于Kerberos的EMR Kafka和 Hadoop集群。 2.EMR服务的Kafka和Hadoop集群中 Kerberos相关配置和使用方法。 3.Ranger中添加Kafka、HDFS、Hive和 Hbase服务和访问策略。 4.Flume中和Kafka、HDFS相关的安全配 置。 产品列表：E-MapReduce、专有网络VPC、云服务器ECS、云数据库RDS版
如果开启了挂载公网和远程登录能力，建议您通过安全组严格控制可以访问 EMR集 群各项服务的来源 IP地址，建议使用最小授权原则和临时授予的方式进行控制。配置完成，单击下一步：确定。文档版本：20200330 16 EMR集群安全认证和授权管理 EMR Kafka安全集群 步骤10 在确认页面，各项信息确认无误后，勾选《E-MapReduce服务...
云速搭部署 ALB 实现负载分发
本实践通过云速搭构建一个基于 http(s)的负载均衡业务架构，实现终端浏览器发起http(s)请求后，经过 ALB 监听配置的转发规则，分别负载分担到后端 ECS 服务器、CLB 和 ACK 集群。
步骤15 核对订单无误后，勾选《云速搭服务条款》，并单击下一步：支付并创建进行应用部 署。文档版本：20211028 16 云速搭部署 ALB实现负载分发 通过云速搭 CADT部署资源 步骤16 部署成功后，单击查看报告，可以查看详细的应用部署报告。文档版本：20211028 17 云速搭部署 ALB实现负载分发 验证通过 ALB转发到CLB实现负载...
超级计算集群实现自然语言处理训练
场景描述 本方案适用于自然语言训练场景，使用神龙 GPU云服务器（SCCGN6）+CPFS进行NLP的 训练，采用Bert模型。这里不使用容器，直接 使用裸机进行NLP的Bert训练，使用飞天AI加 速训练工具可以有效提升多机多卡的训练效率。 解决问题 使用神龙GPU云服务器搭建NLP训练环 境 使用SCC的RDMA网络 使用CPFS存储训练数据 使用飞天AI加速训练工具加速训练 产品列表 神龙GPU云服务器（SCCGN6） SCC超级计算集群 CPFS共享存储
超级计算集群实现自然语言处理训练 最佳实践 部署架构图 场景描述 本方案适用于自然语言训练场景，使用神 龙GPU云服务器（SCCGN6）+CPFS进 行NLP的训练，采用Bert模型。这里不使 用容器，直接使用裸机进行NLP的Bert训 练，使用AIACC可以有效提升多机多卡的 训练效率。解决问题 使用神龙GPU云服务器搭建NLP训练 环境 ...
中小企业CDH集群上云升级CDP解决方案
中小企业 CDH 集群上云升级 CDP 解决方案，助力原 CDH/HDP 的用户快捷升级到企业级 CDP 环境，并链接阿里云相关产品服务。同时，基于阿里云便捷的基础网络设施和云网络服务，能够快速构建云上云下互联的混合云架构。
阿里云与 Cloudera 联合打造阿里云上半...构建现代化数据仓库以解决企业对数据来源、数据量及数据服务时效的需求，基于强大的自助工具服务于 BI 分析用户，同时提供向导及自动化管理工具，并借助 Apache Atlas 改进了数据资产管理功能，帮助企业实现 PCI 和 GDPR 标准.数据仓库与数据资产安全管理.数据仓库与数据资产安全管理.
来自：
解决方案
容器计算服务 ACS
容器计算服务 ACS 是以 K8s 为使用界面供给容器算力资源的云计算服务，提供符合容器规范的算力资源。
供应链安全安全左移：提供镜像构建、安全扫描、全球同步和部署的自动化集成应用交付链能力，帮助企业客户构建高效安全交付和自动化安全运维能力，践行安全左移原则。制品可信：支持云原生制品的完整性安全校验能力，同时通过集成云安全中心服务，基于动态的规则配置和内置的扫描引擎提供对风险镜像的自动化阻断能力。运行时...
来自：
云产品
云数据库 RDS MySQL 版
阿里云云数据库RDS MySQL是一种稳定可靠、可弹性伸缩的在线MySQL数据库服务, 提供了高可用、高可靠、高安全、易运维等一站式的数据库解决方案，帮助您免除MySQL运维的烦恼。
单元化部署系统可以按地域等规则拆解成多个独立小系统单元化部署，利用云数据库RDS MySQL高可用版或集群版，分散业务节点在不同可用区实现跨可用区容灾,保障核心系统稳定可靠。降本增效利用云数据库RDS MySQL高可用的ARM架构，可大幅降低上云成本，同时还可增加ARM架构的只读实例，实现读写分离，还可灵活增减只读节点数量...
来自：
云产品
RDS MySQL迁移至PolarDB MySQL版
RDS MySQL的数据可在线实时同步到PolarDB MySQL版，并且升级切换后的PolarDB集群包含源RDS实例的账号信息、数据库、IP白名单和必要的参数。
提供高读写性能，支持业务全球化部署游戏场景下需经常进行开服合服操作，业务峰值时可能需要支撑百万级玩家同时在线的高并发压力，更可能需要确保业务的增长进行海外部署。PolarDB 提供低延迟、高稳定、高性能的云服务，满足游戏业务需求。数据强一致性保证，满足金融级可靠性要求金融场景下对业务要求高可用和强一致性，...
来自：
解决方案
云数据库 SelectDB 版
阿里云数据库 SelectDB 是现代化实时数据仓库 SelectDB 在阿里云上的全托管服务，内核基于业界领先的开源分析型数据库 Apache Doris 研发，由阿里云和飞轮科技联合打造。阿里云数据库 SelectDB 聚焦于满足企业级大数据分析需求，广泛应用于实时报表分析、即席多维分析、日志检索分析、数据联邦与查询加速等场景，致力于为客户提供极致性能、简单易用的数据分析服务。
强一致的聚合物化视图，支持查询自动改写命中，满足亚秒级聚合统计查询。万级高并发支持分区分桶级裁剪、跳数索引(Zonemap、Bloomfilter)、点查索引(主键、倒排)，减少读取的数据量，提升并发查询能力。结合行列混存、定制查询优化器，单机可支撑上万 QPS 的高并发点查。相关产品云数据库 SelectDB 版本产品云数据库 RDS ...
来自：
云产品
游戏数据运营融合分析
场景描述 1.游戏行业有结构化和非结构化数据融合分 析需求的客户。 2.游戏行业有数据实时分析需求的客户，无法 接受T+1延迟。 3.对数据成本有一定诉求的客户，希望物尽其 用尽量优化成本。 4.其他行业有类似需求的客户。 方案优势/解决问题 1.秒级实时分析：依托ADB计算密集型实例， 秒级监控DAU等数据，为广告投放效果提 供有力的在线决策支撑。 2.高效数据融合分析：打通结构化和非结构化 数据，支撑产品体验分析；广告买量投放效 果实时（分钟级）分析，渠道的评估更准确。 3.低成本：DLA融合冷数据分析+ADB存储密 集型温数据分析+ADB计算密集型热数据分 析，在满足各种分析场景需求的同时，有效 地降低的客户的总体使用成本。 4.学习成本低：DLA和ADB兼容标准SQL语 法，无需额外学习其他技术。 产品列表 专有网络VPC、负载均衡SLB、NAT网关、弹性公网IP 云服务器ECS、日志服务SLS、对象存储OSS 数据库RDSMySQL、数据传输服务DTS、数据管理DMS 分析型数据库MySQL版ADS 数据湖分析DLA、QuickBI
ROS的编排引擎将根据模板自动完成所有资源的创 建和配置，实现自动化部署及运维。更多信息，请参见：help.aliyun.com/document_detail/28852.html EIP：弹性公网 IP（Elastic IP Address，简称 EIP），是可以独立购买和持有的 公网 IP地址资源。目前，EIP可绑定到专有网络类型的 ECS实例、专有网络类 型的私网 SLB实例、...
云原生ACK应用管理实践
在Kubernetes平台中，一个应用可能包含多个Kubernetes子资源，在应用部署完成以后，可以从统一的视角展现整体应用的拓扑结构，同时对于持续部署等场景做到统一的版本管理与回滚。 场景描述 云原生时代的到来，用户在使用Kubernetes进行应用管理的同时也面临着一些痛点和挑战。 遇到的痛点： 应用编排文件如何管理。 应用包含哪些K8s资源，能否统一管理。 如何管理应用版本，能否快速回滚。 方案优势 多集群低成本容灾，日常迭代版本一键同发。 国内站、国际站多地域部署业务，版本同发。 应用维度查看/管理工作负载（相关资源聚合）。 同一套编排，多环境发布，大幅降低出错率。
云原生 ACK应用管理 最佳实践 业务架构 场景描述 在 Kubernetes平台中，一个应用可能包含多 个 Kubernetes子资源，在应用部署完成以后，可以从统一的视角展现整体应用的拓扑...小结 本章通过 Git应用部署方式进行了应用在多集群的部署和测试，用户也可以通过自动部署的方式进行部 署，这里就不再缀述。文档版本：20201031 21
互联网、电商Elasticsearch搜索
场景描述 每一个生活在互联网中的用户，每天都在经 历各种各样的“搜索”，查找电商网站商品、 信用卡账单、查电子发票、查附近的餐厅酒 店、查偶像、查交通等等。相对于传统的关 系型数据库，Elasticsearch只需要几毫秒的 时间，即可查询PB级数据并从中找到匹配 信息。利用Elasticsearch高可用性和易用 性，能够快速处理网站、APP丢给它的文本、 数字、日期、IP以及地理数据。 解决问题 1.电商网站商品、订单、物流等搜索 2.保险行业保单查询 3.互联网教育行业课程搜索 4.O2O行业地理位置搜索等 产品列表 云服务器ECS 专有网络VPC 负载均衡SLB 云数据库RDSMySQL版 Dataworks Elasticsearch 数据传输服务DTS
低成本：自动化部署，零运维成本。TCO是自建的 75%。生态：完美兼容开源生态，对接阿里云其他产品。2 文档版本：20220121 互联网、电商 Elasticsearch搜索最佳实践 前置条件 前置条件 在执行本文操作前，请完成以下准备工作：注册阿里云账号，并完成实名认证。您可以登录阿里云控制台，并前往实名认证...
自建Hive数仓迁移到阿里云EMR
场景描述 客户在IDC或者公有云环境自建Hadoop集群构 建数据仓库和分析系统，购买阿里云EMR集群之 后，涉及到将数据仓库和Hive元数据的数据库迁 移上云。目前主流Hive数据仓库迁移场景为1.x 版本迁移到阿里云EMR(Hive2.x版本），涉及到 数据订正更新步骤。 解决的问题 Hive数据仓库的数据迁移方案 Hive元数据库的迁移方案 Hive跨版本迁移后的数据订正 产品列表 E-MapReduce，VPC，ECS，OSS，VPN网关。
方案优势 易用性 您可以简单选择所需 ECS机型（CPU、内存）与磁盘，并选择所需的软件，进行 自动化部署。经济性 您可以按需创建集群，即离线作业运行结束就可以释放集群，还可以在需要时动 态地增加节点。深度整合 E-MapReduce 与阿里云其它产品（例如，OSS、MNS、RDS 和 MaxCompute 等）进行了深度整合，支持以这些产品...
基于ECI+FaaS构建游戏战斗结算服
在游戏行业的很多SLG游戏作品中，为了防止客户端作弊，在每局战斗之后，在客户端预判玩家胜利的情况下，需要服务端来进行战斗数据的结算，从而确定玩家是不是真正的胜利。战斗结算是强CPU密集型，结算系统每日需要大量的计算力，尤其是开服或者活动期间忽然涌入的大量玩家，导致需要的计算量瞬间几倍增长，同时需要结算系统保持稳定的延时来保证玩家的用户体验。 1. ECI支持500台实例30S弹出，快速解决业务模块扩容压力。FaaS毫秒级伸缩扩容，化解算力瓶颈，平滑解决暴增调用请求。 2. 降低成本：ECI每天弹性运行8小时，与6代同规格包月相比节省成本40%+，FaaS按需付费，即开即用，节省预留资源消耗。 3. 免运维：FaaS和ECI都是全托管免运维的服务，客户专注业务开发即可。 4. 模块公共化：减轻游戏逻辑服的压力，结算需求复用到类似需求的游戏。
小结：为了增强实验的体感，本案例采用通过控制台的方式，完成基于 ACK集群的应 用部署，现实工作中，常常采用 CICD自动化的方式，完成容器化部署，感兴趣的同 学，请参考如下最佳实践：容器应用 Devops for ACK集群 https://bp.aliyun.com/detail/52?spm=a2cls.b8387508.0.0.4e784a21NhGrB4 基于 k8s多集群隔离环境下的 ...
SAP上云解决方案
SAP上云解决方案依托阿里云可靠和灵活的云计算基础设施和平台服务，结合 SAP 世界领先的企业级数据库和商务应用解决方案，帮助企业简化 IT 架构、实现商业价值、加速数字化转型的步伐。
阿里云 QuickStart\\u00A0SAP 自动化部署服务，快速构建 SAP 高可用解决方案.混合云 HBR 备份服务和 SAP HANA 原生集成，提供安全、高效的备份和容灾保护.智能接入网关.单地域同可用区高可用部署方案.阿里云上单地域跨可用区 SAP 系统高可用实现方案架构示例（以 S/4HANA 产品为例）方案依托商业 Linux 系统 SLES/RHEL 高...
来自：
解决方案
在线教育流量洪峰
1. 通过Tair缓存的性能增强型解决高并发读的性能问题，通过持久内存型解决大并发写性能及数据可靠性问题。 2. PolarDB作为主数据库保存业务的交易数据，通过弹性能力和并发SQL解决性能瓶颈。 3. ADB+QuickBI提供的数据仓库方案通过分时弹性能力和实时业务展现能力。
注意：PolarDB的弹性伸缩过程可以在 5分钟内完成，而且全过程自动化完成，并且 一次可以部署多个读节点，高效的实现的集群资源的伸缩能力。4.3.场景四：并行查询 PolarDB集群版本需为 PolarDB MySQL 8.0且 Revision version为 8.0.1.0.5或以上，您可以通过查询版本号确认集群版本。文档版本：20210120 24 在线教育流量洪峰...
- 产品推荐
- 这些文档可能帮助您