云原生多模数据库Lindorm
云原生多模数据库Lindorm提供各规模、多模型的云原生数据库服务。可兼容HBase/Cassandra、OpenTSDB、Solr、SQL、HDFS等多种开源标准接口。支持海量数据的低成本存储处理和弹性按需付费，是互联网、IoT、车联网、广告、社交等场景首选数据库，也是为阿里核心业务提供支撑的数据库之一。
提供社交IM场景专属的FeedStream功能，开发效率和运行性能提升一个数量级.主备双活容灾，请求自动容错.在千万并发下，保持单个毫秒响应.高压缩比，数据冷热分离，支持多存储规格.存储计算分离架构，支持独立伸缩，自动化扩容.对象存储 oss.内容分发网络 CDN.搭配使用产品.高效、稳定的社交Feed流信息存储.在电商场景下，...
来自：
云产品
云速搭自定义扩容ACK集群
本实践借助云速搭 CADT，针对ACK集群自定义扩容场景，以“CADT控制台”和“CADT API”两种不同的实现方式进行演示。
文档版本：20220818 31 云速搭自定义扩容 ACK集群 通过云速搭 CADT API进行 ACK扩容 2.2.CADT 命令行工具安装 CADT命令行工具是基于 CADT的 OPENAPI能力提供了一个命令行交互的运维工具，在后续章节我们将通过 CADT的命令行工具进行 API调用的演示。Openapi 地址 https://next.api.aliyun.com/api/BPStudio/2021-09-31 该...
云Clickhouse冷热数据分层存储
基于云ClickHouse可以给电商、游戏、互联网以及其他行业提供高性能、高稳定性、低维护成本、高性价比的实时数据分析、精准营销、业务运营、业务分析、业务预警、业务营销、数仓加速等场景化方案，本实践会向客户提供数据库低维护成本、数据库链路构建、冷热分层存储、快熟分析等操作实践。 解决问题 1. 维护成本低不用建设维护体系，稳定性高，数据倾斜自动均衡。 2. 完善的数据同步链路，可以平滑将业务库、大数据、日志服务的数据同步到Clickhouse，降低研发成本。 3. 平滑升级版本，业务中断小。 冷热分层后透明读取，帮客户节约整体数据存储成本。
一站式提供数据采集、加工、分析、告警可视化与投递功 能，全面提升研发、运维、运营和安全等场景数字化能力。云 ClickHouse集群支持直 接投递日志服务的 Project，然后在云 ClickHouse中进行 SLS日志的实时分析。操作步骤 步骤1 登录日志服务服务控制台。文档版本：20210416 24 云 ClickHouse冷热数据分层存储最佳实践 云...
阿里云数据库快速搭建疫情分析系统最佳实践
疫情态势分析和防控任务迫在眉睫，如果快速搭建高效的疫情态势分析系统是众多部门和单位的难题，阿里云polardb for PG+Ganos解决方案可在极短时间内完成分析系统搭建，有效助力疫情防。 方案优势： 1、性能优越：Ganos作为自研的时空数据库引擎，相比postgis性能更优秀。 2、安全稳定：故障自动切换自愈，资源隔离，多副本存储。 3、简单易用：开箱即用，兼容postgresql，打通quickbi快速搭建数据分析展示。 4、功能强大：相比postgis在时空模型上做了较多扩充，支持几何模型，栅格模型，网络模型，时空轨迹模型，点云模型，拓扑网络模型。
更多信息，请参见：www.aliyun.com/product/ecs QuickBI：阿里云上客户都在用的 BI产品，无缝对接各类云上数据库和自建数据 库，大幅提升数据分析和报表开发效率，0代码鼠标拖拽式操作交互，让业务人员 也能轻松实现海量数据可视化分析。更多信息，请参见：www.aliyun.com/product/bigdata/bi Polardb：云原生关系型数据库 ...
在线教育流量洪峰
1. 通过Tair缓存的性能增强型解决高并发读的性能问题，通过持久内存型解决大并发写性能及数据可靠性问题。 2. PolarDB作为主数据库保存业务的交易数据，通过弹性能力和并发SQL解决性能瓶颈。 3. ADB+QuickBI提供的数据仓库方案通过分时弹性能力和实时业务展现能力。
更多信息，请参见 https://www.aliyun.com/product/ApsaraDB/ads QuickBI：无缝对接各类云上数据库和自建数据库，大幅提升数据分析和报表开 发效率，0代码鼠标拖拽式操作交互，让业务人员也能轻松实现海量数据可视化 分析。更多信息，请参见 https://www.aliyun.com/product/bigdata/bi 文档版本：20210120 IV 在线教育流量...
企业上云workshop
本文模拟了如下场景: 1. 线下 IDC 环境中部署了一个业务系统，业务是利用 wordpress 系统提供网站服务。 2. 本文详细介绍了如何将以上线下系统搬迁到云上， 包括如何在云上构建以上业务系统，如何迁移线下 系统到云上，如何割接。 3. 最后介绍了迁移上云后，如何部署安全系统。 解决问题 IDC 业务系统搬迁上云 云上构建业务系统 部署安全系统
更多信息，请参见服务器迁移 中心 SMC介绍 https://help.aliyun.com/document_detail/121581.html 数据传输服务 DTS：支持 RDBMS、NoSQL、OLAP等数据源间的数据交互，集 数据迁移/订阅/同步于一体，助您构建安全、可扩展、高可用的数据架构。更多信 息，请参见数据传输服务 DTS介绍 https://www.aliyun.com/product/dts Web...
来自：
最佳实践
相关产品：专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,负载均衡 SLB,弹性公网IP,文件存储NAS,云数据库PolarDB,Web应用防火墙,云防火墙,SSL证书,云速搭
基于转发路由器构建企业级组网
通过云企业网转发路由器 1. 实现灵活的互通、隔离、引流策略 2. VPC 间的内网互访流量经过三方安全设备管控（如Palo Alto） 3. 统一多 VPC 的互联网访问出口，提高业务安全性
2.3.4.（可选）部署 Palo Alto防火墙 在 2.3.3章节通过一台开启网络转发功能的 ECS模拟网络设备，本章节在 ECS上部 署 Palo Alto防火墙并设置具体的网络策略进行网络安全管控。具体请参考云市场镜像 了解更多信息 https://market.aliyun.com/products/56774017/cmjj00043525.html 为了方便起见，重新购买一台 ECS并从云镜像...
数据湖-在线学习场景数据分析
场景描述 本场景以在线教育中一个答题闯关类的应用为 例，使用WebServer来模拟演示这类日志数据 的分析处理。通过Nginx和Pythonflask搭建 WebServer，模拟应用中的关键页面，比如登 录、课程内容等，之后构造若干用户使用的模拟 日志数据，投递到数据湖进行分析后获取应用 PV、UV、课程内容访问排行、平均得分等等。 解决问题 基于数据湖（EMR+OSS）搭建大数据平台。 EMR和OSS使用和配置。 数据统一存储到OSS。 产品列表 E-MapReduce 对象存储OSS 云服务器ECS 访问控制RAM 专有网络VPC
说明：目前EMR控制台上创建集群时还不支持绑定ROLE的功能，实际生产环境中 为了对OSS精确授权访问，请使用SDK或API创建集群。文档版本：20200331 22数据湖-在线学习场景数据分析 部署EMR集群 2.6.EMRJindoFS 配置 注：以下内容基于EMR3.25版本，包含的smartdata版本为2.2.x。CADT中的EMR更新版本3.33，包含JindoFS版本为3.2...
大数据近实时数据投递MaxCompute
本文介绍离线大数据场景使MaxCompute构建云 上近实时数仓，打通云下数据上云链路，解决数据复杂类型支持和动态分区问题，满足高级数据处理需求的最佳实践。 l混合云环境下，现有业务系统零改造，打通数据上云链路。 l使用UDF实现复杂数据类型转换和数据动态分区。 l使用DataWorks配置周期调度业务流程，数据自动入仓。 l借助MaxCompute优化计算引擎，实现降本增效。 产品列表 云服务器ECS 专有网络VPC 访问控制RAM 数据总线DataHub E-MapReduceEMR DataWorks 大数据计算服务MaxCompute
MaxCompute支持 SQL、MapReduce、UDF（Java/Python）、Graph、基于 DAG的处理、交互式、内存计算、机器学习等计 算类型及 MPI迭代类算法。大幅简化了企业大数据平台的应用架构，具有强数据安 全、低成本、免运维、极致弹性扩展等特点。MaxCompute已与数据集成、DataWorks、QuickBI、机器学习 PAI、ADB、推荐引擎、移动数据...
低成本跨境文件传输
场景描述 1.跨境对象存储数据传输需求。 2.对跨境传输成本控制严苛。 3.能接受一定程度网络抖动带来的文件同步 延迟。 4.系统需要有足够的弹性和扩展性应对大规 模文件的写入。 方案优势/解决问题 1.运维低成本：开发人员关注代码逻辑即可； 2.网络成本低：相比CEN高速通道的方式网 络成本降低； 3.同步服务部署成本低：文件发生变化触发函 数计算任务，按量触发，不用准备ECS； 4.弹性高效：一个文件同步触发一个函数工作 流任务，充分利用资源高效同步。 产品列表 专用网络VPC 云服务器ECS 弹性公网IP 函数计算 对象存储OSS 函数工作流
您无需开发就能快捷完成日志数 据采集、消费、投递以及查询分析等功能，提升运维、运营效率，建立 DT 时代 海量日志处理能力。官网链接：https://help.aliyun.com/document_detail/48869.html 文档版本：20211025（发布日期）III 低成本跨境文件传输最佳实践 目录 目录 文档版本信息.I 法律声明.I 前言.II 目录.IV 最佳实践...
数据库异地灾备
场景描述 适用于不满足于单地域，对数据可靠性 （RPO）和服务可用性（RTO）要求更高 的，希望防范断电、断网等机房故障，抵 御地震、台风等自然灾害，具备异地容灾 备份恢复能力的客户业务场景。 解决问题 1.实时备份，RPO达到秒级 2.表级恢复，故障恢复时间大大缩短 3.长期归档，自动管理备份生命周期 4.异地灾备，构建数据库灾备中心 产品列表 专有网络VPC 云服务器ECS 弹性公网IP（EIP） 负载均衡SLB 云数据库RDSMySQL 数据库备份服务DBS 对象存储服务OSS 数据湖分析服务DLA 数据管理服务DMS 数据传输服务DTS
在创建前，您需要结合具体业 务，规划 VPC 和 交 换 机 的 数 量 及 网 段 等。详见：https://www.aliyun.com/product/vpc ECS：云服务器（Elastic Compute Service，简称 ECS）。阿里云提供的一种基础 云计算服务。无需提前采购硬件设备，根据业务需要，随时创建所需数量的云服务 器 ECS实例。在使用过程中，随着业务的...
自建Hive数仓迁移到阿里云EMR
场景描述 客户在IDC或者公有云环境自建Hadoop集群构 建数据仓库和分析系统，购买阿里云EMR集群之 后，涉及到将数据仓库和Hive元数据的数据库迁 移上云。目前主流Hive数据仓库迁移场景为1.x 版本迁移到阿里云EMR(Hive2.x版本），涉及到 数据订正更新步骤。 解决的问题 Hive数据仓库的数据迁移方案 Hive元数据库的迁移方案 Hive跨版本迁移后的数据订正 产品列表 E-MapReduce，VPC，ECS，OSS，VPN网关。
步骤7 启动 Hive进入 HQL命令行交互界面。hive 说明：在 hive命令行界面，使用 quit;退出。1.3.创建 Hive表并导入数据 步骤1 通过 SSH登录到 hadoop-master节点，执行以下命令进入 Hive命令行界面。hive 步骤2 创建数据库 log_data_warehouse。create database log_data_warehouse;use log_data_warehouse;步骤3 Apache日志...
EMR本地盘实例大规模数据集测试
场景描述 阿里云为了满足大数据场景下的存储需求，在云 上推出了本地盘D1机型，这个系列提供了本地 盘而非云盘作为存储，提高了磁盘的吞吐能力， 发挥Hadoop的就近计算优势。阿里云EMR 产品针对本地盘机型，推出了一整套的自动化运 维方案，帮助用户方便可靠地使用本地盘机型， 不需要关注整个运维过程同时数据的高可靠和 服务的高可用。 解决问题 1.云盘多份冗余数据导致成本高 2.磁盘吞吐量不高 3.节点的高可靠分布问题 4.本地盘与节点的故障监控问题 5.数据迁移时自动决策问题 6.自动故障节点迁移与数据平衡问题 产品列表 EMR(E-MapReduce) 本地盘 VPC
Hue(Hadoop User Experience)是一个开源的 Apache Hadoop UI 系统，最早是由 Cloudera.Desktop演化而来，由 Cloudera贡献给开源社区，它是基于 Python Web 框架 Django实现的，通过使用 Hue可以在浏览器的 Web控制上与 Hadoop集群来进 行交互分析来处理数据，例如操作 HDFS上的数据，管理和查询 Hive数据库的数据 等等。...
基于弹性计算的AI推理
场景描述 本方案适用于使用GPU进行AI在线推理的场 景。在推理之前，模型已经训练完成。例如,刷脸 支付中，我们在刷脸的时候，就是推理的一个过 程。再比如图像分类，目标检测，语音识别，语 义分析等返回结果的过程。 解决问题 使用GPU云服务器搭建推理环境 使用容器服务Kubernetes版构建推理 环境 使用NAS存储模型数据 使用飞天AI加速推理工具加速推理 产品列表 GPU云服务器 容器服务Kubernetes版 NAS共享存储
Notebook：Jupyter Notebook是一款基于网页的交互计算应用程序，适用于全过 程计算，包括开发、文档编写、运行代码和展示结果。Jupyter Notebook通过网页启 动，用户可以在网页中直接编写代码和运行代码，代码的运行结果直接在代码块下显 示；Notebook 同时支持在编码页面直接编写说明文档。更多信息，请参见 ...
RAPIDS加速机器学习
场景描述 本方案适用于使用RAPIDS加速库+GPU 云服务器来对机器学习任务或者数据科学 任务进行加速的场景。相比CPU，利用 GPU+RAPIDS在某些场景下可以取得非常 明显的加速效果。 解决问题 1.搭建RAPIDS加速机器学习环境 2.使用容器服务Kubernetes版部署 RAPIDS环境 3.使用NAS存储计算数据 产品列表 容器服务Kubernetes版 GPU云服务器 文件存储NAS
示例效果如下：•相关函数介绍 函数功能 函数名称 下载文件 def download_file_from_url(url,filename):解压文件 def decompress_file(filename,path):获取当前机器的 def get_gpu_nums():GPU个数 管理 GPU内存 def initialize_rmm_pool():def initialize_rmm_no_pool():def run_dask_task(func,*kwargs):提交 DASK任务 def...
游戏业务分区合服
概述 为了提高游戏玩家的体验,并提高留存率,增强付费率.除了游戏本身的内容趣味性外, 改善用户访问加速体验,并对游戏数据分区合服是很常见的业务运营场景. 本方案适用于: 1游戏业务运营,对多个分区数据库进行合并,增加付费用户积极性的需求. 2游戏业务加速,中心化部署的网络加速需求. 方案优势 1便捷数据迁移. 2内网安全传输 3加速远端用户访问质量体验 4快速应对上层业务运营的技术实现操作. 产品列表 网络产品:VPCSLBNAT网关CEN共享带宽包EIP全球加速GA 计算产品:ECS 数据库产品:RDSDTS 存储产品:OSS 云解析
Service 阿里云提供的一种支持 RDBMS（关系型数据 库）、NoSQL、OLAP 等多种数据源之间数据交互 的数据流服务。DTS 提供了数据迁移、实时数据 Data 订阅及数据实时同步等多种数据传输能力，可实现 DTS Transmission 不停服数据迁移、数据异地灾备、异地多活(单元 Service 化)、跨境数据同步、实时数据仓库、查询报表分 流、...
- 产品推荐
- 这些文档可能帮助您