数据集成 Data Integration
阿里云数据集成 Data Integration是跨异构数据、低成本、弹性扩展的数据采集同步平台，为DataX的商业版，支持ETL，支持50+数据源跨网络离线(全量/增量)同步。
互联网业务变化与增量速度都非常快，通过DataWorks构建简单、灵活，弹性的技术架构满足业务发展需求.构建实时离线一体化数据仓库.推荐、风控、分析等实时业务....独享资源组首月5折.大数据workshop.性能高1倍，价格低3/4！数据库实时同步新选择.一键实时/离线同步至Elasticsearch，数据集成再添新功能.近期重要功能.
来自：
云产品
基于Elasticsearch的订单检索加速最佳实践
随着企业信息化程度越来越高，核心业务数据存储在传统关系型数据库中不可避免地会遇到一个问题：单表记录不断增多，数据检索速度会变慢，尤其是对中文的模糊查询（建立普通索引完全不起作用）。虽然数据库自身在不断完善，但效果有限且没办法灵活扩展，复杂场景无法应对。 本方案基于阿里云Elasticsearch作为二级索引库，数据集成产品提供Binlog实时订阅，实时解析、增量数据实时更新及二级索引库之间进行数据实时同步，为数据库提供“能力增益”， 不仅能从根本解决主库抗压问题，提升稳定性；同时支持高效率、高性能、高弹性、低成本、多复杂场景的检索加速服务。
创建独享资源组并绑定 说明：Dataworks需要独享资源组才能访问 Elasticserch。步骤1 在左侧导航栏选择资源组列表，切换地域为华东 1（杭州），选择独享资源组标签，点 击左上角的创建集成资源组。步骤2（可选）在创建独享资源组页面，若没有资源组订单号，则点击购买。步骤3 在 DataWorks独享资源（包年包月）页面，完成...
互联网电商行业离线大数据分析
电商网站销售数据通过大数据分析后将业务指标数据在大屏幕上展示，如销售指标、客户指标、销售排名、订单地区分布等。大屏上销售数据可视化动态展示，效果震撼，触控大屏支持用户自助查询数据，极大地增强数据的可读性。
说明：此模板会按照基础资源环境规划，完成云资源的创建：包括网络环境、1台 绑定EIP的ECS、一个API网关、一个MySQL数据库实例、开通DataWorks基 础版（如果未开通）、两个DataWorks独享资源组、DataV大屏。步骤5 单击右上角的部署应用。部署前，参考资源环境规划清单，核对每个产品的参数细节，包括规格、ECS镜像、实例...
自建Hadoop迁移MaxCompute
场景描述 客户基于ECS、IDC自建或在友商云平台自建了大数 据集群，为了降低企业大数据计算平台的成本，提高 大数据应用开发效率，更有效保障数据安全，把大数 据集群的数据、作业、调度任务以及业务数据库整体 迁移到MaxCompute和其他云产品。 解决的问题 自建Hadoop集群搬迁到MaxCompute 自建Hbase集群搬迁到云Hbase 自建Kafka或应用数据准实时同步到 MaxCompute 自建Azkaban任务迁移到Dataworks任务 产品列表 MaxCompute，Dataworks、云数据库Hbase版、Datahub、VPC，ECS。
源表：ODPS hbase_intermediate_table_job99_ip_statics 目标表：云数据库 Hbase job99_ip_statics 独享资源组详细内容请查看 https://help.aliyun.com/document_detail/137838.html 步骤1 登录 Dataworks控制台 https://workbench.data.aliyun.com/consolenew?#/ 步骤2 进入新增独享资源组页面 步骤3 购买独享数据集成资源...
基于MaxCompute的大数据BI分析
场景描述 本文以电商行业为例，将业务数据和日志数据使用 MaxCompute做ETL之后，同步到ADB进行实时 分析，之后通过QuickBI进行快速可视化展示。 解决问题 1.互联网行业、电商、游戏行业等网站、App、 小程序应用内BI分析场景。 2.可扩展到各类网站BI分析场景使用。 产品列表 1.MaxCompute 2.分析型数据MySQL版 3.日志服务SLS 4.QuickBI 5.云服务器ECS 6.RDSMySQL版
说明：绑定 Hologres数据源必须使用独享数据集成资源组，若是已有，可忽略，若 是没有，则需要购买独享资源组并绑定至指定 DataWorks工作空间。文档版本：20211213 56 基于 MaxCompute的大数据 BI分析 DataWorks大数据处理 5.6.创建业务流程 步骤1 打开 Dataworks首页...
1分钟部署幻兽帕鲁游戏服务器
近期幻兽帕鲁、雾锁王国等游戏备受追捧，其对计算资源与带宽有较高的要求。为确保游戏过程的流畅度与优质体验，玩家需要配备性能好、稳定可靠的游戏服务器。本方案为广大的玩家群体提供专属联机服务器，一键购买部署，轻松开启游戏。
一键购买及部署游戏玩家独享：热卖游戏联机服务器，一键直达购买+部署方案介绍整体资源架构中包括独立的VPC、VSwitch、安全组、ECS实例以及修改游戏配置的命令等资源。您无需手动搭建，只需要按照提示点点鼠标选择相关配置，服务器创建、网络端口设置、防火墙配置、游戏环境安装等步骤会自动完成。无需技术背景自建一个游戏...
来自：
解决方案
容器多云统一监控日志
多云、混合云成为常态，Forrester 报告中指出，未来 89% 的企业至少使用两个云，74% 的企业至少使用三个甚至更多公有云，在面对多云/混合云这样大的趋势下，Gartner报告指出，安全、运维复杂性、财务复杂性是多云架构的主要挑战，本方案给出了在多云/混合云场景下，构建基于容器环境下的统一管理、统一监控和统一日志方案，解决多云、混合云场景下，运维复杂性问题。 应用场景 客户在阿里云以外的其他云服务商（AWS、Azure、GCP、TencentCloud、HuaweiCloud等）或者IDC基于容器（Kubernetes）运行业务系统，希望构建容器场景下的统一监控日志系统，方便做不同大屏和问题分析定位。 解决问题 •构建容器多云统一监控和日志系统，在一个平台可以看到不同环境系统的运行情况。
这里需要注意，如果通过CADT创建的VPC、vswitch中人工通过其他方式添加了资 源，如通过控制台或者API等购买了ECS，释放时因为这些非CADT部署的资源会 依赖VSW和VPC，会出现释放失败。遇到这类问题请先去控制台人工进行资源清理 后，在CADT中再次释放资源即可。步骤1 对等连接路由策略释放，其中 步骤2 打开需要释放的应用 ...
基于函数计算FC实现阿里云Kafka消息内容控制MongoDB DML操作
在大数据ETL场景，将Kafka中的消息流转到其他下游服务是很常见的场景，除了常规的消息流转外，很多场景还需要基于消息体内容做判断，然后决定下游服务做何种操作。 该方案实现了通过Kafka中消息Key的内容来判断应该对MongoDB做增、删、改的哪种DML操作。 当Kafka收到消息后，会自动触发函数计算中的函数，接收到消息，对消息内容做判断，然后再操作MongoDB。用户可以对提供的默认函数代码做修改，来满足更复杂的逻辑。 整体方案通过CADT可以一键拉起依赖的产品，并完成了大多数的配置，用户只需要到函数计算和MongoDB控制台做少量配置即可。
l 网络架构：n 整个方案会在某个 Region 下，该示例使用的是北京 Region n 在 Region 下会创建一个 VPC u 在该 VPC 下会创建一个某可用区的交换机，该示例使用的是 G 可用区 u 在该 VPC 下会创建一个安全组 n Kafka，FC，MongoDB 都在该 VPC 的 G 可用区的交换机下 n FC 在与 VPC 其他资源互通时会使用到 VPC 下的安全组 ...
Oracle RAC 12C云上部署
Oracle RAC架构迁移上云，提供高并发，高吞吐，高安全等特性，适用于金融，电力，电信，制造业等传统客户的核心交易系统。
NVMe共 享盘支持多ECS实例并发读写访问，具备高可靠、高并发、高性能等特点。为 ECS实例提供了多实例挂载和IO拦截功能。 VPC：VirtualPrivateCloud，简称VPC。基于阿里云创建的自定义私有网络,不 同的专有网络之间二层逻辑隔离，可以在自己创建的专有网络内创建和管理云产 品实例，比如ECS、负载均衡、RDS等。在创建前，...
云数据库 RDS MySQL 版
阿里云云数据库RDS MySQL是一种稳定可靠、可弹性伸缩的在线MySQL数据库服务, 提供了高可用、高可靠、高安全、易运维等一站式的数据库解决方案，帮助您免除MySQL运维的烦恼。
A：您可以开通独享代理服务并为主实例增加只读节点，无需修改应用代码，通过独享代理自动将只读请求转发至主实例关联的只读实例节点，实现读性能扩展。查看详情Q：RDS MySQL 支持 SQL 日志或操作日志审计吗？A：RDS MySQL 高可用版或集群版支持 SQL 洞察和审计功能，在全量请求和安全审计的基础上，融合了搜索、SQL 洞察、...
来自：
云产品
云速搭部署云数据库专属集群Mybase
通过云速搭设计一个Mybase专属集群部署架构包含AliSQL及Tair
具有 云资源独享、支持资源超分配，自主可运维、开放权限等特点。MyBase不仅能保 障客户独享云资源更加安全、享受到云数据库服务的便捷灵活，同时还满足企业 对 数 据 库 合 规 性、安 全 性 和 高 性 能 的 要 求。详见:https://www.aliyun.com/product/apsaradb/cddc 文档版本：20220207 3 云速搭部署云数据库专属集群...
DDH集群运维管理
场景描述 当前许多企业的IDC业务场景，资源管理 等使用习惯与公共云不同，使用DDH集群 管理，继承IDC虚拟化使用习惯，比如自 定义ECS规格。同时针对CPU负载较低 的场景，通过CPU超分，可以有效提高资 源利用率，节省整体成本。并且可以通过账 号授权业务团队，结合云监控资源使用率， 方便业务使用的同时又能有效遏制资源浪 费。 方案优势 1.使用专有宿主机集群构建云上环境，通 过超分提高资源利用率，降低企业成 本。 2.通过访问控制授权，云监控资源，完成 专有宿主机集群运维管理使用闭环。 产品列表 访问控制RAM 专有网络VPC 云服务器ECS 云监控CloudMonitor
名词解释 专有宿主机（DedicatedHost，简称DDH）是阿里云专为企业客户定制优化的云 端解决方案，具有物理资源独享、部署更灵活、配置更丰富、性价比更高等特点，可以有效地降低企业上云的TCO（TotalCostofOwnership）。DDH是指由一个 租户独享物理资源的云主机。作为该云主机的唯一租户，您不需要与其他租户共 享云主机...
互联网、电商Elasticsearch搜索
场景描述 每一个生活在互联网中的用户，每天都在经 历各种各样的“搜索”，查找电商网站商品、 信用卡账单、查电子发票、查附近的餐厅酒 店、查偶像、查交通等等。相对于传统的关 系型数据库，Elasticsearch只需要几毫秒的 时间，即可查询PB级数据并从中找到匹配 信息。利用Elasticsearch高可用性和易用 性，能够快速处理网站、APP丢给它的文本、 数字、日期、IP以及地理数据。 解决问题 1.电商网站商品、订单、物流等搜索 2.保险行业保单查询 3.互联网教育行业课程搜索 4.O2O行业地理位置搜索等 产品列表 云服务器ECS 专有网络VPC 负载均衡SLB 云数据库RDSMySQL版 Dataworks Elasticsearch 数据传输服务DTS
步骤6 修改数据集成资源组配置，选择之前创建的独享数据集成资源组。33 文档版本：20220121 互联网、电商 Elasticsearch搜索最佳实践 数据同步及搜索 步骤7 保存并执行 步骤8 查看日志同步完成，消耗了 32.853秒。34 文档版本：20220121 互联网、电商 Elasticsearch搜索最佳实践 数据同步及搜索 步骤9 把调度配置为 1小时...
虚拟桌面架构的高性能体验云上部署
场景描述 针对自建虚拟化桌面架构迁移阿里云，以及有虚拟化桌面 架构需求上云。包括但不限于： 1.有许可证合规要求，利用自带license快速上云的客户。 2.对数据安全较高要求，需要快速构建虚拟化桌面的客 户。 解决问题 利用云上灵活性和规模化优势，构建云上更加高效、高性 能体验的服务，为客户解决： 1.客户VDI部署的需求，能够更及时的得到满足。 2.解决硬件资源限制，根据业务规模化部署并集中管 控。 3.利用公共云的网络、计算、备份容灾方案、安全防护 等，提供高可靠、高性能、高体验的远程桌面服务。 产品列表 VPC（专有网络） SLB（负载均衡） CEN（云企业网） 专有宿主机 OpenAPI
详见：https://www.aliyun.com/product/vpc 专有宿主机：提供基于阿里云虚拟化托管、物理主机独享的单租户环境、通过独享 硬件资源方式可以满足安全、合规、自定义部署、自带许可证（BYOL）需求，在 专有宿主机上可以创建多种规格的 ECS实例，继承了 ECS的规格选择灵活、性 能稳定的优点和特性。详见：...
基于Flink的资讯场景实时数仓
场景描述 本实践针对资讯聚合类业务场景，Step by Step介绍 如何搭建实时数仓。 解决问题 1.如何搭建实时数仓。 2.通过实时计算Flink实现实时ETL和数据流。 3.通过实时计算Flink实现实时数据分析。 4.通过实时计算Flink实现事件触发。 产品列表 实时计算 专有网络VPC 云数据库RDSMySQL版 分析型数据库MySQL版 消息队列Kafka 对象存储OSS NAT网关 DataV数据可视化
实时计算 Flink独享模式可开放 UDF/UDAF/UDTF接口，为用户提供更强大的数 据处理能力。文档版本：20220223（发布日期）1 基于 Flink的资讯场景实时数仓 前置条件 前置条件 在进行本文操作前，您需要完成以下准备工作：注册阿里云账号，并完成实名认证。您可以登录阿里云控制台，并前往实名认证页 面（account.console....
云上IT治理workshop
假设您负责假设您负责一家集团公司的IT 基础设施，集团 旗下有多个分公司（如制造分公司和销售分公 司），各分公司有独立的开发、测试以及运维团 队。现在选择阿里云作为合作伙伴，拟达到以下 业务目标： 1. 各个分公司拥有独立的账号，可以购买云资 源，由集团账号统一付费。 2. 集团对各个分公司的账号以及权限拥有管理 权限。 3. 网络资源由独立的平台账号统一规划和创 建，分配给各个公司使用。 4. 集团对分公司账号具有配置管理和操作审计 权限。 5. 各分公司内部独立管理账号权限以及资源。
使用运维组 RAM用户创建资源 使用运维组 RAM用户 sre001登录 ECS控制台创建 2台服务器，分别归属到开发资 源组和测试资源组。此处创建 ECS会使用第二章节集团网络中心共享的网络环境。步骤1 退出出当前登录账号，使用登录运维组 RAM 用户 sre001 登录。（https://signin.aliyun.com/）步骤2 访问云速搭（CADT）工具控制台...
VMware迁移DDH
场景描述 介绍本地部署或托管在IDC环境的VMware系统迁移 上云至独立宿主机（DDH）的最佳实践。使用DDH在 云端构建由独享物理服务器组成的资源池，同时配合 ECS成熟稳定的虚拟化技术体系，充分利用云上资源 弹性、按使用付费的优势，快速构建高性能、高可靠 和可快速动态伸缩的虚拟化系统，满足安全、合规、 自定义部署、自带许可证（BYOL）等企业级需求。 解决问题 l云端独享高性能、高可靠、高弹性的物理服务器资源池。 l基于成熟云原生虚拟化技术体系，支持ECS自定义部 署，可在DDH环境和多租户环境间迁移。 l支持自带许可证（BYOL）。 产品列表 l访问控制RAM l专有网络VPC l云服务器ECS l对象存储OSS l专有宿主机DDH l资源编排ROS
测试环境和生存环境通过 VPC隔离，并共享 DDH 资 源，以达到资源利用的最大化。文档版本：20200218 55 企业上云实践 VMware 迁移 DDH|附录 附录 使用资源编排服务（ROS）创建资源 使用资源编排服务（ROS）可以大幅提供资源创建效率。本最佳实践相关资源编排模版已在控制台-解决方案 中心提供，直接调用即可快速创建本最佳...
云数据库产品总览（瑶池）
阿里云提供完善的数据库解决方案，多款数据库产品，满足99%的业务场景，荣获Gartner、信通院等国内外多项认证。轻松满足高可靠、高可用性、高性能等数据库需求；运维工作量大幅减少，让企业一站式享受数据上云及分布式架构的技术红利！
专属集群MyBase以资源独享、自主运维、安全可控的新型模式，很大程度上推动客户进行心业务上云的决心。在弥补社区PG无官方高可用方案、BUG修复缓慢、数据损坏修复耗时长等问题的同时，开放OS权限、允许资源超分机制，在安全可控下，很大程度上满足了客户运维习惯和成本把控.阿里云数据库产品助力我们畅捷通提升了产品性能、...
来自：
云产品
- 产品推荐
- 这些文档可能帮助您