基于Flink的资讯场景实时数仓
场景描述 本实践针对资讯聚合类业务场景，Step by Step介绍 如何搭建实时数仓。 解决问题 1.如何搭建实时数仓。 2.通过实时计算Flink实现实时ETL和数据流。 3.通过实时计算Flink实现实时数据分析。 4.通过实时计算Flink实现事件触发。 产品列表 实时计算 专有网络VPC 云数据库RDSMySQL版 分析型数据库MySQL版 消息队列Kafka 对象存储OSS NAT网关 DataV数据可视化
关键指标超越 Storm的性能 6到 8倍，计算成本大大低于开源软件，让流 计算真正普世化、平民化。实时计算 Flink提供 SQL语义的流式数据分析能力(Flink SQL)，大幅降低流数据 分析门槛。实时计算 Flink独享模式可开放 UDF/UDAF/UDTF接口，为用户提供更强大的数 据处理能力。文档版本：20220223（发布日期）1 基于 Flink的资讯...
SLS多云日志采集、处理及分析
场景描述 从第三方云平台或线下IDC服务器上采集 日志写入到阿里云日志服务，通过日志服务 进行数据分析，帮助提升运维、运营效率， 建立DT 时代海量日志处理能力。 针对未使用其他日志采集服务的用户，推荐 在他云或线下服务器安装logtail采集并使用 Https安全传输；针对已使用其他日志采集 工具并且已有日志服务需要继续服务的情 况，可以通过Log producer SDK写入日志 服务。 解决问题 1.第三方云平台或线下IDC客户需要使用 阿里云日志服务生态的用户。 2.第三方云平台或线下IDC服务器已有完 整日志采集、处理及分析的用户。 产品列表 E-MapReduce 专有网络VPC 云服务器ECS 日志服务LOG DCDN
步骤4 在 DCDN全站加速实时监控可以看到流量已经经过 DCDN启动加速。文档版本：20211203 59 SLS多云日志采集、处理及分析 编写 Spark作业源码解读及问题排查 附录 1：编写 Spark作业源码解读及问题排查 Spark作业源码解读 说明：本节介绍 Spark作业源码编写过程、源码解读及常见问题排查。本作业使用了 github 开源的 kafka...
CDH迁移升级CDP最佳实践
当前 CDH 免费版停止下载，终止服务，针对需要企业版服务能力并且CDH 升级过程对业务影响较小的客户，通过安装新的 CDP 集群，将现有数据拷贝至新集群，然后将新集群切换为生产集群，升级过程没有数据丢失风险，停机时间较短，适合大部分互联网客户升级使用。
ltiple yarn.resourcemanager.schedul 允许较高优先级的应用程序抢占较低优先级的应用程 er.monitor.enable 序。yarn.scheduler.capacity.maxi 指定集群中可用于运行应用程序主控的资源的最大百分 mum-am-resource-percent 比。默认最大运行应用程序。每个用户的最大运行应用程序。yarn.scheduler.fair.user-as-是否使用与...
大数据近实时数据投递MaxCompute
本文介绍离线大数据场景使MaxCompute构建云 上近实时数仓，打通云下数据上云链路，解决数据复杂类型支持和动态分区问题，满足高级数据处理需求的最佳实践。 l混合云环境下，现有业务系统零改造，打通数据上云链路。 l使用UDF实现复杂数据类型转换和数据动态分区。 l使用DataWorks配置周期调度业务流程，数据自动入仓。 l借助MaxCompute优化计算引擎，实现降本增效。 产品列表 云服务器ECS 专有网络VPC 访问控制RAM 数据总线DataHub E-MapReduceEMR DataWorks 大数据计算服务MaxCompute
应用数据投递至 Kafka 本章介绍应用程序将数据信息投递至 Kafka Topic。本实践模拟的数据信息中含有多 种复杂数据类型，包含 map、list、struct，后续章节将以此数据内容说明复杂数据 类型在向 MaxCompute投递过程中的处理方法。3.1.获取 Kafka 接入点 在 EMR Kafka集群页面中，展开 emr_core_1后有三个节点，记录这三个 IP...
Function Compute搭建前端CICD系统
场景描述 传统动静不分离的产品架构，随着访问量在增 长，性能会成为瓶颈。在这种情况下，用户可以 通过利用OSS和CDN对网站进行架构优化， 做到网站文件的动静分离，提升用户访问体验， 实现成本可控。本方案使用函数计算监听前端代 码库提交的分支变更，上传分支文件至OSS，通 过CDN进行前端资源加速。 方案优势 1.面向serverless：无需购买服务器 2.免运维：无需部署配置Jenkins 3.提供日志查询、性能监控和报警等功能 4.一站式：事件驱动方式触发响应 5.费用极低：按需付费 产品列表 专有网络VPC 对象存储OSS 日志服务SLS 函数计算 CDN
在这种情况下，用户可 以通过利用 OSS和 CDN对网站进行架构优 化，做到网站文件的动静分离，提升用户访问 体验，实现成本可控。本方案使用 Function Compute监听前端代码 库提交的分支变更，上传分支文件至 OSS，通过 CDN进行前端资源加速。方案优势 1.面向 serverless：无需购买服务器 2.免运维：无需部署配置 Jenkins 3....
自建K8S集群迁移ACK弹性裸金属集群
场景描述 在微服务化改造之后，企业在享受K8S带来应 用管理的便利的同时，存在硬件性能不足，本 地扩展性差，容器容灾难，K8S管理复杂等问 题。 解决问题 1.增强K8S扩展性：如何通过弹性裸金属服务 器的强劲硬件性能，实现云端资源急速扩 展，从容应对应用访问压力大的问题。 2.如何简化云端K8S运维：通过阿里云容器服 务（ACK）实现敏捷开发和部署落地，加速 企业业务迭代。 3.如何综合考虑迁移和容灾：如何整合云上和 云下容器资源实现遇到故障时可以通过健 康检查实现自动容灾。 4.如何不改应用上云：如何实现应用上云数据 库连接零修改。 5.数据库上云及回退：如何实现上云回退； 产品列表 ACK/ECS/SLB/NAT网关/弹性裸金属服务器/DTS/RDS MySQL
配置应用程序.20 2.2.5.打包分发自定义镜像.24 2.2.6.各节点安装 K8S程序包.26 2.2.7.配置 DNS解析，登录验证.31 3.部署云上环境.36 3.1.创建容器镜像仓库，上传自定义镜像.36 3.2.创建配置 RDS数据库环境并同步数据.41 3.2.1.配置 RDS数据库.41 3.2.2.配置 PrivateZone.46 3.2.3.创建数据库 DTS迁移链路.49 3.3.创建部署 ...
基于Elasticsearch的订单检索加速最佳实践
随着企业信息化程度越来越高，核心业务数据存储在传统关系型数据库中不可避免地会遇到一个问题：单表记录不断增多，数据检索速度会变慢，尤其是对中文的模糊查询（建立普通索引完全不起作用）。虽然数据库自身在不断完善，但效果有限且没办法灵活扩展，复杂场景无法应对。 本方案基于阿里云Elasticsearch作为二级索引库，数据集成产品提供Binlog实时订阅，实时解析、增量数据实时更新及二级索引库之间进行数据实时同步，为数据库提供“能力增益”， 不仅能从根本解决主库抗压问题，提升稳定性；同时支持高效率、高性能、高弹性、低成本、多复杂场景的检索加速服务。
更多信息，请参见：www.aliyun.com/product/rds/mysql Elasticsearch：阿里云 Elasticsearch兼容开源 ELK功能，提供免运维全托管服务 的弹性云搜索与分析引擎，致力于数据库加速、数据分析、信息检索、智能运维监 控等场景服务；独有的云原生高性能内核、达摩院 NLP分词、向量检索、智能运 维、免费 X-Pack高级商业特性等...
容器Swarm集群向ACK集群灰度迁移
场景描述 随着K8S生态的完善，越来越多的客户需要从 Swarm集群迁移向ACK集群 解决问题 1.迁移过程中维持业务的延续性 2.迁移过程业务高可用 3.迁移过程可灰度 4.迁移过程可回滚 5.迁移进度可把控 产品列表 专有网络VPC 云数据库RDSMySQL 容器服务ACK 云服务器ECS
Serverless Kubernetes：无需创建和管理 Master节点及 Worker节点，即可通过 控制台或者命令配置容器实例的资源、指明应用容器镜像以及对外服务的方式，直接启动应用程序。文档版本：20190401 16 容器 Swarm集群向 ACK集群灰度迁移最佳实践 创建 Kubernetes集群 步骤4 单击创建集群，弹出配置确认，确认后单击确认即开始...
Serverless 应用引擎SAE
Serverless 应用引擎 SAE（Serverless App Engine）是一款零代码改造、极简易用、自适应弹性的应用全托管平台。SAE 让您免运维 IaaS和 K8s，秒级完成从源代码/代码包/ Docker 镜像部署任何语言的在线应用（如 Web /微服务 /Job任务）到 SAE，并自动伸缩实例按使用量计费，开箱即用日志、监控、负载均衡等配套能力。
同时也提供应用模板、CLI 命令行工具、组件库、成本管家等能力，帮助开发者们快速高效的交付应用程序.无侵入微服务治理.支持 Spring Cloud、Dubbo 零代码改造迁移至SAE。提供服务注册&发现、环境隔离、配置管理、限流降级、应用无损上下线、服务鉴权、全链路灰度等能力.百毫秒级弹性伸缩，根据流量自适应调整应用实例；支持...
来自：
云产品
Elasticsearch
阿里云检索分析服务 Elasticsearch 版是100%兼容开源的分布式检索、分析套件。提供ELK等开源全托管的产品服务能力。为结构化/非结构化数据提供低成本、高性能及可靠性的检索、分析平台级产品服务。具备读写分离、存算分离、弹性伸缩、智能化运维、免费的X-Pack高级商业特性等产品特性。
在企业基础设施运维、系统监控、问题诊断、运营监测、攻击溯源、数据归档、日志审计、业务洞察等各个应用场景下，需要对各类日志、指标、Tracing数据进行统一收集、存储和实时监控分析，从而快速定位问题，提升企业运维和经营效率.基于云托管Beats、APM实现各类指标、日志、Tracing数据的轻量化采集，结合Logstash、Flink...
来自：
云产品
数字证书管理服务（原SSL证书）
阿里云为您提供证书服务，在云上签发DigiCert、GlobalSign、GeoTrust、CFCA、WoSign证书，实现网站HTTPS化，使网站可信，防劫持、防篡改、防监听。并对云上证书进行统一生命周期管理，简化证书部署，一键分发到云上产品。
价格及优惠说明.数字证书管理服务（原SSL证书）提供...小程序上架安全合规认证：各生态上架小程序审核必备条件.兼容主流浏览器和主流操作系统.兼容国际/国内主流RSA/ECC/国密算法.云上/云下统一管理，到期自动提醒，云产品一键部署，方便快捷.支持SSL证书多年订阅服务，最高可到3年，自动更新/部署.生命周期管理.查看更多商品.
来自：
云产品
云数据库专属集群MyBase
云数据库专属集群MyBase是阿里云专为企业级用户定制优化的解决方案。支持MySQL、PostgreSQL、SQL Server、Redis和MongoDB数据库。具有云资源独享、支持资源超分配，自主可运维、开放权限等特点。MyBase不仅能保障客户独享云资源更加安全、享受到云数据库服务的便捷灵活，同时还满足企业对数据库合规性、安全性和高性能的要求。
云数据库专属集群 MyBase.SQL Server 是发行最早的商用数据库产品之一，支持复杂的 SQL 查询，性能优秀，对基于 Windows 平台.NET架构的应用程序具有完美的支持.云数据库 RDS SQL Server 版.高可靠双机热备架构及可无缝扩展的集群架构，满足高读写性能场景及容量需弹性变配的业务需求.云数据库 Redis 版.云数据库 MongoDB ...
来自：
云产品
全球加速 GA
阿里云全球加速GA（Global Accelerator）是一款覆盖全球的互联网加速服务，实现网络服务全球范围就近接入和跨地域部署。依托阿里云优质的全球网络大幅减少网络延迟、丢包，传输效率提升10+倍。在跨境加速/游戏加速/应用加速等场景中为用户构建一个高性能、高可靠、高安全、易部署的加速网络。
通过监测应用程序运行状态，自动调度用户流量，保证服务连续性.用户可设置访问控制策略；可搭配阿里云安全服务，保护应用免受攻击.即开即用、全局资源统一监控运维，业务部署更敏捷.针对全球企业音视频会议、企业内部OA/Web网络加速、跨国企业访问分支、移动办公等企业办公场景，加速企业远程协作效率，提升企业管理效能....
来自：
云产品
数据库专家服务
阿里云数据库专家服务以工具与数据库专业技能结合的方式，给客户提供云数据库产品本身能力范围之外的专业服务。主要包括：紧急救援，健康诊断、性能调优、护航保障、Oracle迁移、技术培训、顾问咨询等服务，同时给出专业的报告与建议。
更多产品与服务.SQL Server是发行最早的商用数据库产品之一，支持复杂的SQL查询，性能优秀，对基于Windows平台.NET架构的应用程序具有完美的支持.云数据库RDS SQL Server 版.高可靠双机热备架构及可无缝扩展的集群架构，满足高读写性能场景及容量需弹性变配的业务需求.云数据库 Redis 版.云数据库MongoDB版支持ReplicaSet和...
来自：
云产品
移动研发平台EMAS
阿里云移动研发平台EMAS是国内领先的云原生应用研发平台（移动App、H5应用、小程序、Web应用等），基于广泛的云原生技术，为企业、开发者提供一站式的应用研发管理服务，涵盖应用开发、测试、运维、运营等应用全生命周期。
测试+监控+日志+热修复闭环体系，帮助用户发现、定位和解决问题，全面保障应用交付质量.阿里巴巴最佳商业实践之一，弹性伸缩，稳定支撑尖峰流量.移动DevOps.多端低代码开发平台魔笔.移动用户反馈.超级App解决方案.低代码音视频工厂.一站式短视频制作播放解决方案.移动研发平台EMAS.超级App解决方案.钉钉交流：35248489.超级...
来自：
云产品
- 产品推荐
- 这些文档可能帮助您