自建Hadoop迁移到阿里云EMR
场景描述 场景1：自建Hadoop集群数据（HDFS）迁移到 阿里云EMR集群的HDFS文件系统； 场景2：自建Hadoop集群数据（HDFS）迁移到 计算存储分离架构的阿里云EMR集群，以OSS 和JindoFS作为EMR集群的后端存储。 解决的问题 客户自建Hadoop迁移到阿里云EMR集群的 技术方案； 基于IPSecVPN隧道构建安全和低成本数据 传输链路 产品列表 E-MapReduce，VPC，ECS，OSS，VPN网关。
步骤7 下载本实践方案中需要的 Hadoop配置文件，已经预先进行了配置，只需更改少量内 容即可使用。1.下载配置文件包并解压缩。cd~wget https://code.aliyun.com/best-practice/111/raw/master/hadoop-etc-files.tar.gz tar -zxvf hadoop-etc-files.tar.gz cd hadoop-etc-files ls -l 2. 在进行实践过程中，强烈建议您执行...
云原生ACK应用管理实践
在Kubernetes平台中，一个应用可能包含多个Kubernetes子资源，在应用部署完成以后，可以从统一的视角展现整体应用的拓扑结构，同时对于持续部署等场景做到统一的版本管理与回滚。 场景描述 云原生时代的到来，用户在使用Kubernetes进行应用管理的同时也面临着一些痛点和挑战。 遇到的痛点： 应用编排文件如何管理。 应用包含哪些K8s资源，能否统一管理。 如何管理应用版本，能否快速回滚。 方案优势 多集群低成本容灾，日常迭代版本一键同发。 国内站、国际站多地域部署业务，版本同发。 应用维度查看/管理工作负载（相关资源聚合）。 同一套编排，多环境发布，大幅降低出错率。
步骤1 编写示例应用的 yaml模版 在容器服务 ACK控制台左侧导航栏选择市场>编排模版，点击创建进行应用编排模 版的创建 创建名为 appcenter-demo的 yaml模版 文档版本：20201031 4 云原生 ACK应用管理实践 方案背景 步骤2 手动部署应用到集群 在容器服务 ACK控制台>应用中心，选择创建应用 应用名称设置为”app”，...
基于MaxCompute的大数据BI分析
场景描述 本文以电商行业为例，将业务数据和日志数据使用 MaxCompute做ETL之后，同步到ADB进行实时 分析，之后通过QuickBI进行快速可视化展示。 解决问题 1.互联网行业、电商、游戏行业等网站、App、 小程序应用内BI分析场景。 2.可扩展到各类网站BI分析场景使用。 产品列表 1.MaxCompute 2.分析型数据MySQL版 3.日志服务SLS 4.QuickBI 5.云服务器ECS 6.RDSMySQL版
步骤3 首次开通 DataWorks服务前，需先填写 AK信息。在 DataWorks页面，单击前往填 写 AK。步骤4 在安全提示对话框中，单击继续使用 AccessKey。文档版本：20211213 40 基于 MaxCompute的大数据 BI分析 DataWorks大数据处理 步骤5 在安全信息管理页面，单击创建 AccessKey。步骤6 在手机验证对话框中，单击点击获取，输入...
云速搭部署 ALB 实现负载分发
本实践通过云速搭构建一个基于 http(s)的负载均衡业务架构，实现终端浏览器发起http(s)请求后，经过 ALB 监听配置的转发规则，分别负载分担到后端 ECS 服务器、CLB 和 ACK 集群。
在新添加的 app1和 app2两台 ECS上执行以下指令：文档版本：20211028 26 云速搭部署 ALB实现负载分发 验证通过 ALB转发到CLB实现负载分发 yum install-y httpd systemctl start httpd systemctl status httpd mkdir/var/www/html/app touch/var/www/html/index.html cat /var/www/html/app/index.html This is anapp within ...
自建K8S集群迁移ACK弹性裸金属集群
场景描述 在微服务化改造之后，企业在享受K8S带来应 用管理的便利的同时，存在硬件性能不足，本 地扩展性差，容器容灾难，K8S管理复杂等问 题。 解决问题 1.增强K8S扩展性：如何通过弹性裸金属服务 器的强劲硬件性能，实现云端资源急速扩 展，从容应对应用访问压力大的问题。 2.如何简化云端K8S运维：通过阿里云容器服 务（ACK）实现敏捷开发和部署落地，加速 企业业务迭代。 3.如何综合考虑迁移和容灾：如何整合云上和 云下容器资源实现遇到故障时可以通过健 康检查实现自动容灾。 4.如何不改应用上云：如何实现应用上云数据 库连接零修改。 5.数据库上云及回退：如何实现上云回退； 产品列表 ACK/ECS/SLB/NAT网关/弹性裸金属服务器/DTS/RDS MySQL
vpc_cloud 外网访问内网：域名需已通过-备案域名：qinying.site 备案 网络-EIP（绑定负载均衡设备）：50M，eip_slb 负载均衡设备：地域：杭州（可用区 K+J）-实例名：SLB集群负载-实例规格：标准型 II-网络：内网（IPV4，按流量计 费）-监听：80端口-后端服务器权重/端口：等权重/30080端口 防火墙配置（安全组模拟）：模板...
电商网站业务安全
场景描述 业务运营活动是电商行业开展业务必不可少的 手段，但大流量带来的系统可用性、优惠券带来 的“薅羊毛”等问题屡见不鲜，都会影响到运营 效果、甚至出现负面影响。阿里云基于集团电商 业务多年的运营经验，为云上客户提供完整的电 商网站运营期间的防护方案。 解决问题 1.保障业务运维活动系统稳定运行 2.防止“薅羊毛” 3.运营优惠给到真实的客户 产品列表 爬虫风险管理 风险识别 DDoS防护包
购买专业版或企业版包月的，需要提前申请白名 单开通。配置项 说明 防护套餐 企业版 资源所在地域 华北 2（北京）资源组 全部 默认资源组 业务规模 根据实际情况选择。购买数量 1 订购时长 1年 文档版本：20210806 55 企业上云实践 电商网站业务安全最佳实践|开通 DDoS防护包（可选）步骤6 单击立即购买。步骤7 在确认订单...
可观测可视化 Grafana 版
可观测可视化 Grafana 版作为云原生数据可视化平台，为运维SRE、研发工程师、产品经理、市场营销等不同角色提供开箱即用的一站式可视化平台，满足运维监控、经营分析、汇报展示等不同场景的查询、可视化、告警需求。
覆盖浏览器、小程序、APP、分布式应用、容器等不同可观测环境与场景。帮助企业实现全栈性能监控与端到端追踪诊断。提高监控效率，压降运维工作量.应用实时监控服务 ARMS.支持按需发起压测任务，可提供百万并发、千万 TPS 流量发起能力，100%兼容 JMeter。提供的场景编排、API 调试、流量定制、流量录制等功能，可快速创建...
来自：
云产品
基于ALB的统一流量调度和监控
企业在走向容器化过渡阶段，内部同时存在ECS应用和容器应用的情况，在多域名业务场景下，为了对应用的入方向流量进行统一的调度和监控，可通过ALB快速完成内部应用统一流量的管控。 典型场景 多域名转发到混合应用类型场景。 方案优势 1、 高弹性，高并发 2、 减少SLB+EIP数量 3、 一键WAF透明接入 4、 配置简单易上手 5、 统一流量运营分析
基于 ALB统一流量调度和监控 最佳实践 业务架构 场景描述 企业在走向容器化过渡阶段，内部同时存在 ECS应用和容器应用的情况，在多域名业 务场景下，为了对应用的入方向流量进行统 一的调度和监控，可通过 ALB快速完成内 部应用统一流量的管控。典型场景 多域名转发到混合应用类型场景。方案优势 – 高弹性，高并发 – 减少...
企业上云workshop
本文模拟了如下场景: 1. 线下 IDC 环境中部署了一个业务系统，业务是利用 wordpress 系统提供网站服务。 2. 本文详细介绍了如何将以上线下系统搬迁到云上， 包括如何在云上构建以上业务系统，如何迁移线下 系统到云上，如何割接。 3. 最后介绍了迁移上云后，如何部署安全系统。 解决问题 IDC 业务系统搬迁上云 云上构建业务系统 部署安全系统
因此，需 要制定详细的割接方案和操作流程，包括应急回滚方案。本文中简单阐述基本的割接 流程及操作。12.1.云上数据库重新迁移 为避免测试验证数据的干扰，包含测试数据的数据库删除，并重新使用 DTS迁移一次 数据库，即重复 10.5.创建 DTS迁移任务、10.6.DTS迁移任务执行、10.7.为迁移 的数据库添加用户访问权限操作。...
来自：
最佳实践
相关产品：专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,负载均衡 SLB,弹性公网IP,文件存储NAS,云数据库PolarDB,Web应用防火墙,云防火墙,SSL证书,云速搭
资源管理
场景描述 随着企业IT成熟度不断提高、管理的云上资源 不断增多，如何对资源进行高效管理的问题就会 凸显出来。阿里云的资源管理服务支持您按照业 务需要搭建适合的资源组织关系，使用目录、资 源夹、账号、资源组分层次组织与管理您的全部 资源，更好的实现项目成功。 解决问题 1.按照企业组织结构管理账号体系。 2.指定结算账号进行统一结算 3.统一管理成员账号权限系统 4.账号下的资源按照资源组进行分类 5.可以按照自定义财务单元进行分账管理 产品列表 资源管理
注意：在资源组范围内的授权只作用于资源组内，比如 app-1RAM用户被授权应用 1 组的 AdministratorAccess权限只针对资源 1组内的资源有效，app-1RAM用户无 权访问应用 1组之外的其他资源。步骤9 单击资源组应用 2 组的管理权限，新增授权，选择 RAM 用户 app-2，并赋予 AdministratorAccess权限。操作同步骤 8。步骤10 登录...
互联网电商行业离线大数据分析
电商网站销售数据通过大数据分析后将业务指标数据在大屏幕上展示，如销售指标、客户指标、销售排名、订单地区分布等。大屏上销售数据可视化动态展示，效果震撼，触控大屏支持用户自助查询数据，极大地增强数据的可读性。
returnTotalNum=true&pageSize=10&pageNum=1步骤2 在DataV的工作空间>数据源中，添加API网关数据，配置相关参数，具体配置参 考下图：域名：参考上一步骤记录的域名 Appkey和AppSecret：参考2.6步骤14记录的信息 步骤3 配置完成，单击确定。3.3.配置离线数据大屏展示 配置数字翻盘器 步骤1 在大屏应用编辑器页面，单击数字...
RAM用户集成企业AD FS身份认证
介绍阿里云RAM集成Windows AD FS，使用企 业AD对员工的身份认证及管理功能，配置RAM 用户与AD用户的映射关系，实现企业员工使用企 业AD域账号以单点登录（SSO）的方式访问阿里 云控制台。 解决问题 1.Windows AD域部署。 2.Windows AD证书服务及Web服务部署。 3.Windows AD FS部署。 4.阿里云用户SSO配置。 5.AD FS集成RAM用户SSO。 产品列表 l访问控制RAM l专有网络VPC l云服务器ECS
Mac用户可以在AppStore里下载MicrosoftRemoteDesktopapp连接 文档版本：20220617 7RAM用户集成企业ADFS身份认证 创建及配置ECS实例 步骤3 修改主机名，重启。文档版本：20220617 8RAM用户集成企业ADFS身份认证 部署活动目录 2.部署活动目录 2.1.修改DCDNS设置 步骤1 重新远程桌面连接DC，修改DNS配置指向本机回送地址...
金融专属大数据workshop
实践目标 学习搭建一个实时数据仓库，掌握数据采集、存储、计算、输出、展示等整个业务流程。 整个实时数据仓库系统全部基于阿里云产品进行架构搭建，用户可以掌握并学会运用各个服务组件及各个组件之间如何联动。 理解阿里云原生实时离线一体数仓解决方案架构以及掌握交付落地的实践使用方法。 前置知识要求 熟练掌握SQL语法 对大数据体系系统知识有一定的了解
文档版本：20210803（发布日期）14阿里云最佳实践金融大数据WorkShop 最佳实践项目实践 注：如果没有开通Dtahub服务，需要开通Datahub服务，资源校验会如下图所示需 要增加DataHub校验失败截图 文档版本：20210803（发布日期）15阿里云最佳实践金融大数据WorkShop 最佳实践项目实践 文档版本：20210803（发布日期）16阿里云...
来自：
最佳实践
相关产品：块存储,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,弹性公网IP,数据传输,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,实时计算,数据总线,Quick BI,Hologres
利用交互式分析(Hologres)进行数据查询
场景描述：随着收集数据的方式不断丰富，企业信息化 程度越来越高，企业掌握的数据量呈TB、 PB或EB级别增长。同时，数据中台的快 速推进，使数据应用主要为数据支撑、用户 画像、实时圈人及广告精准投放等核心业务 服务。高可靠和低延时地数据服务成为企业 数字化转型的关键。 Hologres致力于低成本和高性能地大规模 计算型存储和强大的查询能力，为您提供海 量数据的实时数据仓库解决方案和实时交 互式查询服务。 解决问题 1.加速查询MaxCompute数据 2.快速搭建实时数据仓库 3.无缝对接主流BI工具 产品列表 MaxCompute Hologres 实时计算Flink 专有网络VPC DataWorks DataV
'$.site_channelid')assite_channelid,get_json_object(message,'$.ad_type')asad_type,get_json_object(message,'$.app_id')asapp_id,get_json_object(message,'$.app_name1')asapp_name1,get_json_object(message,'$.app_name')asapp_name,get_json_object(message,'$.app_ver')asapp_ver,get_json_object(message,'$.tag...
Spring Cloud Netflix应用迁移EDAS
场景描述 Spring Cloud Netflix微服务应用迁移到EDAS 服务（SpringCloud Alibaba云版本）的方法， 迁移后充分利用阿里云监控、调用链、限流降级 等能力，优化应用生命周期管理。 解决问题 1.帮助自建SpringCloudNetflix微服务应用 通过简单修改迁移到阿里云企业级分布式 应用服务（EDAS）平台。 2.迁移到EDAS后，简化应用的运维，提升监 控、调用链探测、限流降级等管理能力，提 高对应用的全生命周期管理。 产品列表 企业级分布式应用服务（EDAS） 负载均衡（SLB） 专有网络（VPC） 云服务器（ECS）
由于在 PiggyMetrics原始的配置文件中，使用了 auth-service作为域名使用，所以需 要在 ECS上配置 auth-service的 IP信息。auth-service的 IP请查看应用列表，选择 文档版本：20200106 58 Spring Cloud Netflix应用迁移 EDAS 微服务应用部署 EDAS环境 auth-service服务查看：然后 SSH登录其它微服务的 ECS（account-service...
云上高并发系统改造
场景描述 随着业务的发展，系统并发压力越来越大，如何 进行系统改造以满足高并发场景的业务需求成 为了一个技术难题。本实践抽象于客户的实际场 景，提供高并发下系统改造的理论指导和部分实 操演示。主要适用于以下场景： 1.系统并发压力大，需要进行系统应用改造。 2.数据层并发压力大，需进行分库分表改造。 3.数据库数据量巨大，亟待分库分表解决查询 和写入瓶颈的场景。 方案优势/解决问题 1.在水平扩展阶段，我们除了通过SLB做负载 均衡外，我们可以通过SLB下挂nginx的方 式，增加负载均衡侧的可扩展性 2.在数据库拆分阶段，在做好数据规划后，我 们借助DTS进行数据迁移，通过DRDS将 RDS MySQL的数据拆分到多个分库和分 表中。 产品列表 专用网络VPC 负载均衡SLB 云服务器ECS 数据库RDSMySQL 数据传输服务DTS PrivateZone 分布式关系型数据库DRDS
后记 1.DRDS 作为数据库拆分的解决方案，在实际使用场景中还有很多的需求，如对 于一个实体需要按照两个完全不同维度进行查询的场景（如订单表既要按照买 家 ID进行汇总，又要按照卖家场景进行汇总），还有全局事务场景等，本文并 未进行探讨，在后续最佳实践中将进行讨论。总之分库分表是一个复杂的工程，需要进行严密的...
基于SLS实现统一告警最佳实践
告警对于企业的开发运维，安全运维，业务运维有着至关重要的作用。然而很多企业在告警运维方面存在着重复建设、监控质量差、告警风暴、触达不人性化、无法闭环等问题。 针对企业在告警管理方面存在的痛点问题，SLS告警提供了一站式云上告警管理方案，具有弹性易用、稳定可靠、功能持续升级、成本更低、噪音更少等优势。企业可以将现有的监控方案系统无缝接入到SLS告警平台，实现在SLS上一站式管理告警。
Alertmanager configuration alerting:alertmanagers:path_prefix:/event/webhook/RAMAK_{ACCESS_KEY_ID}/{WEBHOOK_APP_ID} api_version:v2 static_configs:targets:{ALIYUN_SLS_ENDPOINT} 说明：➢ path_prefix：配置路径信息，此处配置为您在日志服务中创建开放告警服务和应用 后生成的接口信息（子路径部分）。...
企业办公安全访问一体化
本场景模拟企业办公环境，基于 CSAS 服务构 建企业办公安全一体化方案，将“安全 + 网络” 能力无缝融合，实现了对云下办公终端安全的统 一管理，企业无需在投资复杂且昂贵的传统硬件 安全设备，即可快速构建安全、可靠、低成本的 办公安全防护体系。 1. 企业办公环境访问互联网的安全管理 2. 企业办公环境访问内网服务的安全管理 3. 企业办公网络、安全一体化管理
比如我们要防止办公终端中招，那可以在策略设置中选择成人、恶意、非法网站 等分类，阻止员工访问这类网址，保障了企业内部网络的安全。为了演示方便，本场 景中我们选择购物、社交、电子商务分类，可用于禁止办公电脑访问购物、社交类网 站。说明：本文中为了便于演示，统一使用LDAP的账户名称作为策略条件，此外还支持 ...
Exchange Server云上部署最佳实践
阿里云提供基础设施服务，能够以高可用、高容错且经济实惠的方式将Exchange Server部署在云上。通过在 阿里云上部署，可以获得Exchange Server的功能以及阿里云天然灵活性和安全性。
文档版本：20220119 15 Exchange Server云上部署最佳实践 部署域控制器和 DNS 文档版本：20220119 16 Exchange Server云上部署最佳实践 部署域控制器和 DNS 文档版本：20220119 17 Exchange Server云上部署最佳实践 部署域控制器和 DNS 文档版本：20220119 18 Exchange Server云上部署最佳实践 部署域控制器和 DNS 步骤5 ...
- 产品推荐
- 这些文档可能帮助您