Databricks数据洞察
阿里云Databricks数据洞察是基于Apache Spark的全托管数据分析平台, 内核采用更高效、稳定的商业版Databricks Runtime和Delta Lake。可满足数据分析师、数据工程师和数据科学家在大数据场景下对数据湖分析、实时数仓、离线数仓、BI数据分析、AI机器学习等需求
用户根据需求设置节点数量，支持集群高可用.支持ECS通用型、计算型和内存型三种实例规格族.集群规模可动态扩展，调整计算资源大小，达到成本最优.多种用户角色共享数据，交互式协同合作.可以协同工作的工作空间，交互式的作业执行方式，支持Spark、PySpark、Spark R和Spark SQL类型的作业，分析结果可视化展示.集群之间共享...
来自：
云产品
DBS通过IPSec VPN备份自建数据库
场景描述 客户业务系统部署在IDC或者公有云环境，对业 务数据有云上备份需求。在客户交流过程中，基 于数据高可用和灾备需求，要求将数据备份至阿 里云OSS的存储空间，同时备份数据流基于 IPSecVPN/专线进行安全传输。 解决的问题 自建数据库的云上/跨云备份需求 DBS提供了完善的备份机制和API OSS的分层存储机制降低备份集储存成本 基于IPSecVPN/专线进行安全传输。 产品列表 VPC，ECS，DBS，VPN网关，OSS
文档版本：20210812 1 DBS通过 IPSec VPN备份自建数据库 最佳实践概述 安全优势 使用 SSL和 AES256加密技术，保护备份数据传输和存储安全。多用户资源隔离机制，支持异地灾备机制。提供多种鉴权和授权机制及白名单、防盗链、主子账号功能。备份有效性随时验证，任务状况主动通知。提供用户自定义的鉴权机制。易用性 仅需 5...
远程办公-AD管控下的弹性云桌面
在弹性云桌面中部署企业基础办公环境时，IT人员通常会面临以下问题，本文希望通过场景实践的方式，示范如何结合使用不同阿里云产品，来解决这些问题：用户如何管理？企业已有AD用户如何上云？云上共享文件服务权限怎么管？数据安全问题有保障吗？该如何设置？云桌面能使用本地机房或IDC中的服务吗？ 本文使用的应用场景： 场景1：客户A在云上新建Windows ActiveDirectory（以下简称AD）；弹性云桌面，和NAS文件存储服务部署在AD所在的VPC内。场景2：客户B在阿里云上已有AD和NAS。弹性云桌面创建在与AD不同的VPC中。AD与云桌面的VPC通过CEN连接。场景3：客户C在云下IDC有自建AD和文件服务。弹性云桌面创建在阿里云上。云下机房与阿里云弹性云桌面所在VPC通过IPsec VPN连接。 方案优势： 易部署：弹性云桌面支持快速便捷的桌面环境创建、部署、统一管控与运维。 CEN和VPN网关服务开通即用，配置实时生效，快速完成部署。 低成本：弹性云桌面无需前期传统硬件投资，帮您快速构建安全、高性能、低成本的桌面办公体系。可广泛应用于具有高数据安全管控、高性能计算等要求的金融、设计、视频、教育等领域。VPN网关基于Internet建立加密通道，比建立专线更便宜，快速实现混合云。 安全性：VPN网关使用IKE（秘钥交换协议）和IPSec对传输数据或进行加密，保证数据安全可靠。云桌面自带的安全策略保证数据不落地。 集中管控：通过Windows AD对云桌面用户和共享文件服务进行统一权限管控。可实现AD用户自动同步上云，和文件级别的权限管控。
4.2.2.创建企业 IDC的 VPN网关和隧道 企业 IDC中通常在防火墙或路由器上开启 IPSec VPN功能，具体操作请参阅设备说 明书。本最佳实践中仅以 FlexGW IPSec VPN为例进行演示。步骤1 通过 https://ecs.console.aliyun.com/?#/server/region/cn-hangzhou 登录杭州区域的 ECS实例控制台，记录 FlexGW服务器的公网地址：步骤2 在...
自建ElasticSearch迁移阿里云
场景描述 以ElasticSearch为例，演示搭建模拟业务系统、 VPN网关和IPSecVPN隧道，介绍如何通过快照 的方式，将ElasticSearch索引数据安全备份到 阿里云OSS存储空间，以及介绍如何将备份在 OSS的快照仓库恢复到阿里云ElasticSearch实 例，进一步达到ElasticSearch迁移上云的目的。 解决的问题 自建ElasticSearch的云上/跨云备份需求。 自建ElasticSearch迁移到阿里云 ElasticSearch服务实例。 产品列表 VPC，ECS，VPN网关，OSS，阿里云ElasticSearch，云速搭CADT
方案优势 安全性 基于 IPSec VPN/专线的方式进行数据安全传输 低成本 可以在 OSS Bucket设置对象的生命周期，分层存储节省存储的成本 ElasticSearch索引的快照机制 文档版本：20210802 1 自建 ElasticSearch快照备份 OSS 最佳实践概述 备份过程是“智能”的，第一个快照是索引数据的完整拷贝，但是所有后续的快 照会保留的...
自建Hive数仓迁移到阿里云EMR
场景描述 客户在IDC或者公有云环境自建Hadoop集群构 建数据仓库和分析系统，购买阿里云EMR集群之 后，涉及到将数据仓库和Hive元数据的数据库迁 移上云。目前主流Hive数据仓库迁移场景为1.x 版本迁移到阿里云EMR(Hive2.x版本），涉及到 数据订正更新步骤。 解决的问题 Hive数据仓库的数据迁移方案 Hive元数据库的迁移方案 Hive跨版本迁移后的数据订正 产品列表 E-MapReduce，VPC，ECS，OSS，VPN网关。
配置项 说明 名称 vpngw-hangzhou 带宽规格 5 支付方式 预付费/按月付费/1个月 文档版本：20210721 9 自建Hive数据仓库跨版本迁移到阿里云 EMR 基础环境搭建 是否开启 IPSec-Enable VPN 是否开启 SSL-Disable VPN RDS 类别 配置项 说明 实例名 Hive-Metadata-DB 支付方式 后付费 类型 MySQL 版本 5.7 分类 基础版 存储类型 ...
微服务应用问题定位及故障演练
场景描述 用户微服务架构应用基于阿里云 ACK 部署， 通 过 ARMS 监控发现微服务应用的容错能力是否 健壮， 容器编排配置是否合理， 以及节点故障引 发的问题等， 方案通过 AHAS 故障注入模拟生 产环境产生的故障， 通过 ARMS 及时发现问题、 定位问题， 并结合 ARMS 的告警功能快速发现 并解决问题。 发现调用下游一个服务实例出现异常。 发现业务 Pod 故障， 验证业务的稳定性。 发现调用数据库延迟故障， 验证 Pod 的水 平扩容能力。 解决问题 1. 定位并解决微服务应用的容错能力。 2. 定位并解决微服务应用编排合理性。 3. 发现故障并验证系统故障的告警时效性。 产品列表 应用高可用服务 AHAS 性能测试 PTS 应用实时监控服务 ARMS 容器服务 kubernetes 版 负载均衡 SLB 专有网络 VPC 日志服务 SLS
文档版本：20220331 51 微服务应用问题定位及故障演练 问题定位及故障模拟 步骤26 设置一个 CPU为 70%的 HPA，最大伸缩容器数量为 200（这里设置 200个是模拟当 HPA伸缩时，节点无法弹出这么多 POD后会进行节点伸缩）。文档版本：20220331 52 微服务应用问题定位及故障演练 问题定位及故障模拟 步骤27 重复故障演练和 PTS...
自建Hadoop迁移MaxCompute
场景描述 客户基于ECS、IDC自建或在友商云平台自建了大数 据集群，为了降低企业大数据计算平台的成本，提高 大数据应用开发效率，更有效保障数据安全，把大数 据集群的数据、作业、调度任务以及业务数据库整体 迁移到MaxCompute和其他云产品。 解决的问题 自建Hadoop集群搬迁到MaxCompute 自建Hbase集群搬迁到云Hbase 自建Kafka或应用数据准实时同步到 MaxCompute 自建Azkaban任务迁移到Dataworks任务 产品列表 MaxCompute，Dataworks、云数据库Hbase版、Datahub、VPC，ECS。
VPN 网关提供 IPSec-VPN 连接和 SSL-VPN 连接。详情请查看 https://www.aliyun.com/product/vpn IPSec VPN 基于路由的 IPSec-VPN，不仅可以更方便的配置和维护 VPN策略，而且还提供 了灵活的流量路由方式。您可以使用 IPSec-VPN功能将本地数据中心与 VPC或 不同的 VPC之间进行连接。IPSec-VPN支持 IKEv1和 IKEv2协议。只要...
云消息队列 Kafka 版
云消息队列 Kafka 版是阿里云基于Apache Kafka构建的大数据消息中间件，广泛用于日志收集和分析、数据处理等场景。可提供全托管服务，用户无需部署运维，更专业、更可靠、更安全。
实例、消息堆积、TPS 等多维度监控与告警设置，帮助用户及时发现问题.完善的管控类 Open API，用于实现一系列资源管理和运维功能.提供鉴权与授权机制、主子账号等功能，提供企业级的安全防护.VPC 网络隔离，对每次消息收、发请求进行安全访问控制，确保消息的安全性.全面支持 RAM 主子账号、黑白名单、STS 等功能，提供授权...
来自：
云产品
自建Hadoop迁移到阿里云EMR
场景描述 场景1：自建Hadoop集群数据（HDFS）迁移到 阿里云EMR集群的HDFS文件系统； 场景2：自建Hadoop集群数据（HDFS）迁移到 计算存储分离架构的阿里云EMR集群，以OSS 和JindoFS作为EMR集群的后端存储。 解决的问题 客户自建Hadoop迁移到阿里云EMR集群的 技术方案； 基于IPSecVPN隧道构建安全和低成本数据 传输链路 产品列表 E-MapReduce，VPC，ECS，OSS，VPN网关。
设置 JindoFS参数 步骤1 查看 Bigboot和 SmartData服务状态 文档版本：20210714 51 自建Hadoop数据迁移到阿里云 EMR 迁移到其他阿里云存储服务 步骤2 在 Bigboot中修改 OSS相关参数 点击步骤 1中截图标注 1进入 Bigboot服务管理页面，设置 JindoFS的命名空间：在标注 3输入框填写 JindoFS的命名空间，本方案中使用 emr_...
智能标签
智能标签，是通过对视频中视觉、文字、语音、行为等信息进行分析，结合多模态信息融合及对齐技术，实现高准确率内容识别，自动输出视频的多维度内容标签，将非结构化信息转化为结构化信息。可应用于视频智能分析、视频审核、视频搜索、视频个性化推荐，助力视频智能生产。
云数据库SQL Server版已通过ISO 20000、SOC、PCI-DSS、等保三级等十项安全合规认证.SQL Server实例可设置允许连接实例的IP白名单，严格控制访问源；同时支持通过VPC来获取更高程度的网络访问控制.SQL Server实例访问链路支持SSL加密，杜绝中间人攻击行为；支持开启透明数据加密（TDE)，数据落盘自动加密，远离拖库风险.SQL ...
来自：
云产品
EMR集群安全认证和授权管理
场景描述 阿里云EMR服务Kafka和Hadoop安全集群使 用Kerberos进行用户安全认证，通过Apache Ranger服务进行访问授权管理。本最佳实践中以 Apache Web服务器日志为例，演示基于Kafka 和Hadoop的生态组件构建日志大数据仓库，并 介绍在整个数据流程中，如何通过Kerberos和 Ranger进行认证和授权的相关配置。 解决问题 1.创建基于Kerberos的EMR Kafka和 Hadoop集群。 2.EMR服务的Kafka和Hadoop集群中 Kerberos相关配置和使用方法。 3.Ranger中添加Kafka、HDFS、Hive和 Hbase服务和访问策略。 4.Flume中和Kafka、HDFS相关的安全配 置。 产品列表：E-MapReduce、专有网络VPC、云服务器ECS、云数据库RDS版
Apache Knox Apache Knox为 Hadoop REST API提供了一个中央网关，这些 API具有不同程 度的授权、身份验证、SSL和 SSO功能，为 Hadoop提供 SSO访问点。借助 Knox，企业可以放心地将 Hadoop REST API扩展到没有 Kerberos复杂性的新用 户，同时还可以保持对企业安全策略的合规性。阿里云 EMR服务集成了 Apache Knox网关，用于...
Elasticsearch
阿里云检索分析服务 Elasticsearch 版是100%兼容开源的分布式检索、分析套件。提供ELK等开源全托管的产品服务能力。为结构化/非结构化数据提供低成本、高性能及可靠性的检索、分析平台级AI搜索服务。具备读写分离、存算分离、弹性伸缩、智能化运维、免费的X-Pack高级商业特性等产品特性。
查看详情 2020-09-22 新功能/规格 Bulk聚合(Faster bulk)插件上线，有效提高写入吞吐，降低写入拒绝 查看详情 2021-01-15 新功能/规格 Beats数据采集中心支持Filebeat采集ACK服务日志 查看详情 2021-01-27 功能优化 阿里云Elasticsearch实例释放保护 查看详情 2021-01-27 功能优化 Kibana访问安全设置 查看详情 2021-01-27 ...
来自：
云产品
数据库备份DBS
数据库备份（Database Backup，简称DBS）是为数据库提供连续数据保护、低成本的备份服务。它可以为多种环境的数据提供强有力的保护，包括企业数据中心、其他云厂商、混合云及公共云。通过使用阿里实时数据流技术，实现数据库秒级备份，秒级恢复，保障数据安全。
通过阿里云专线、公网+IP白名单+SSL，将数据实时备份至备份场地，保证异地备份安全性。数据库实例释放后，跨地域备份数据仍会按照设置的保留时间进行保留。小打卡 数据库备份DBS助力小打卡实现上亿级数据轻松备份，秒级RPO，日志内存实时捕获，任意时间点恢复，并借助秒级沙箱实例和备份数据查询激活冷数据，大幅降低了海量...
来自：
云产品
数字证书管理服务（原SSL证书）
阿里云为您提供证书服务，在云上签发DigiCert、GlobalSign、GeoTrust、CFCA、WoSign证书，实现网站HTTPS化，使网站可信，防劫持、防篡改、防监听。并对云上证书进行统一生命周期管理，简化证书部署，一键分发到云上产品。
数字证书管理服务（原SSL证书）.数字证书管理服务集云上SSL证书生命周期管理和数字证书应用为一体的SAAS服务。该服务具备签发、管理服务器证书和各类终端证书的能力，同时提供云上证书自动化应用部署的解决方案，便于客户轻松实现数据传输加密和信源加密，保障数据安全.多云部署能力发布：支持腾讯云 及 AWS多款云产品部署...
来自：
云产品
- 产品推荐
- 这些文档可能帮助您