基于Flink的资讯场景实时数仓
基于Flink的资讯场景实时数仓
场景描述 本实践针对资讯聚合类业务场景,Step by Step介绍 如何搭建实时数仓。 解决问题 1.如何搭建实时数仓。 2.通过实时计算Flink实现实时ETL和数据流。 3.通过实时计算Flink实现实时数据分析。 4.通过实时计算Flink实现事件触发。 产品列表 实时计算 专有网络VPC 云数据库RDSMySQL版 分析型数据库MySQL版 消息队列Kafka 对象存储OSS NAT网关 DataV数据可视化
4.业务系统:业务系统通过 DataV数据可视化实现业务指标实时大屏展示。推荐系统捕获用户短期行为偏好事件,推荐用户偏好的类目。文档版本:20220223(发布日期)9 基于 Flink的资讯场景实时数仓 基础环境部署 3.基础环境部署 3.1.CADT部署资源 本节采用云速搭 CADT快速构建该实时数仓资讯场景所需的云资源环境。注意:在...
来自: 最佳实践 相关产品:专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,NAT网关,云原生数据仓库AnalyticDB My,云速搭CADT
自建ElasticSearch迁移阿里云
自建ElasticSearch迁移阿里云
场景描述 以ElasticSearch为例,演示搭建模拟业务系统、 VPN网关和IPSecVPN隧道,介绍如何通过快照 的方式,将ElasticSearch索引数据安全备份到 阿里云OSS存储空间,以及介绍如何将备份在 OSS的快照仓库恢复到阿里云ElasticSearch实 例,进一步达到ElasticSearch迁移上云的目的。 解决的问题 自建ElasticSearch的云上/跨云备份需求。 自建ElasticSearch迁移到阿里云 ElasticSearch服务实例。 产品列表 VPC,ECS,VPN网关,OSS,阿里云ElasticSearch,云速搭CADT
使用 OSS,您可以通过网络随时存储和调用包括文本、图 片、音频和视频等在内的各种非结构化数据文件。ElasticSearch Elasticsearch是一个高度扩展的开源全文搜索和分析引擎。它允许您快速并 接近实时地存储、搜索和分析大量数据。它通常用作底层引擎/技术,为具有复 杂搜索功能和要求的应用程序提供支持。阿里云 Elastic...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,Elasticsearch,云速搭
通过PAI-灵骏分布式训练和部署Llama 2模型
以 Meta 最新开源的大语言模型 Llama2 为例,通过PAI-灵骏完成了大语言模型的高效分布式训练、三阶段指令微调、模型离线推理验证以及在线服务部署等完整的开发链路。
支持多种AI角色管理,算力资源管理运维的企业级AI平台集群管理通过控制台页面或 OpenAPI 即可快速的进行集群的创建、扩容和缩容操作,可视化展示、关联诊断分析工具实现方便的性能调优及快速的问题溯源训练效率、性价比提升大模型训练只需简单配置即可自动分布式并发执行,优化的计算、网络、通信和存储架构提高资源利用率...
来自: 解决方案
应用实时监控服务ARMS
作为云原生可观测平台,应用实时监控服务 ARMS 包含前端监控、应用监控、云拨测等模块。覆盖浏览器、小程序、APP、分布式应用、容器等不同可观测环境与场景。帮助企业实现全栈性能监控与端到端追踪诊断。提高监控效率,压降运维工作量。
聚合多数据源构建统一数据可视化大盘.观测可视化 Grafana 版.聚合多告警源构建统一告警管理体系.超过 5000 家企业共同的选择.仅需59.9元,立即领取性能测试压测资源包.容器、云服务、基础设施等观测场景.端到端多场景覆盖.构建统一运维监控大盘 提供多种模型快速进行瓶颈根因与根因分析.统一展现&多维分析.完整的全样本...
来自: 云产品
RAPIDS加速图像搜索
RAPIDS加速图像搜索
场景描述 本方案适用于使用RAPIDS加速平台 +GPU云服务器来对图像搜索任务进行加 速的场景。相比CPU,利用GPU+ RAPIDS在图像搜索场景下可以取得非常 明显的加速效果。 解决问题 1.搭建RAPIDS加速图像搜索环境 2.使用容器服务Kubernetes版部署图 像搜索环境 3.使用NAS存储计算数据 产品列表 容器服务Kubernetes版 GPU云服务器 文件存储NAS
通常一个数据处理流程包含,数据处理,模型训练,可视化三部分。对应以上三部 分,RAPIDS分别使用 CUDF,CUML和 CUGRAPH三个软件库来进行加速。CUDF是一个 GPU版本的 PANDAS(最常用的数据处理 Python库)。CUML是 RAPIDS中用于加速机器学习算法的库,其中包含了异常火爆的 XGBOOST算法。CUGRAPH提供了 3个库用于统一的图分析...
来自: 最佳实践 | 相关产品:云服务器ECS,文件存储NAS,容器服务 ACK
云防火墙
阿里云云防火墙可提供统一的互联网边界、内网VPC边界、主机边界流量管控防护,包括结合情报的实时入侵防护能力,是您的网络边界防护和等保合规利器。
可视化分析展示所有公网IP流量信息及流量趋势图、出入流量访问Top统计数据等,以及跨VPC流量互访趋势图及分布,帮助您实时关注公网资产和内网资产护网的流量趋势和异常.全面日志审计分析.云防火墙的所有流量会在日志审计分析记录,包括如流量日志、事件日志和操作日志,帮助您实时审计您的网络流量,如攻击防御payload日志...
来自: 云产品
基于Elasticsearch的订单检索加速最佳实践
基于Elasticsearch的订单检索加速最佳实践
随着企业信息化程度越来越高,核心业务数据存储在传统关系型数据库中不可避免地会遇到一个问题:单表记录不断增多,数据检索速度会变慢,尤其是对中文的模糊查询(建立普通索引完全不起作用)。虽然数据库自身在不断完善,但效果有限且没办法灵活扩展,复杂场景无法应对。 本方案基于阿里云Elasticsearch作为二级索引库,数据集成产品提供Binlog实时订阅,实时解析、增量数据实时更新及二级索引库之间进行数据实时同步,为数据库提供“能力增益”, 不仅能从根本解决主库抗压问题,提升稳定性;同时支持高效率、高性能、高弹性、低成本、多复杂场景的检索加速服务。
文档版本:20210517 68 基于 Elasticsearch的订单检索加速最佳实践 数据可视化 步骤2 选择之前创建的索引模式(trading_order)我们可以使用 Elasticsearch 桶聚合 指定图表中显示哪些信息(桶聚合简单的把符合 您搜索条件的文档分成不同类别,又叫做 buckets);例如每个订单类型的数量。通过 使用桶聚合,可以建议多个...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云数据库RDS MySQL 版,DataWorks,Elasticsearch
医药研发提速解决方案
阿里云医药研发提速解决方案,助力创新药研发、生命科学服务、AI 算法制药等算力密集型业务,提供海量计算分析能力。相较传统超算的“静态”资源分配,更加切合用户实际作业负荷的弹性变化特征,追求高性价比,有效降低成本。
基于高性能计算,提供弹性伸缩的资源管理、可视化的作业调度、数据安全传输策略、便捷的商业软件部署于一体的医药研发行业应用与运行环境管理方案.研发数据处理与计算量增大,需要解决资源需求的激增.作业负荷的非周期性变化,需要合理有效利用计算资源.多地多节点并行,需要实现海内外数据上传下载.根据任务或者作业使用...
来自: 解决方案
实时同步RDS与Redis构建缓存一致性
通过DTS数据订阅能力,用户可以实时订阅RDS日志数据变更,并将其写入Redis以实现缓存数据的更新,可以实现MySQL与Redis之间的缓存同步一致性。
查看详情RDS+ClickHouse构建一站式HTAP通过融合MySQL和ClickHouse的数据同步能力,用户可以在一个可视化窗口中简单灵活地配置和管理实时数据同步,这为业务报表统计、交互式运营分析和实时数仓构建提供了便利。在这个窗口中,用户可以轻松选择需要同步的表和字段,设置同步频率和条件,并监控同步状态和性能。这样一来,...
来自: 解决方案
云上持续审计合规最佳实践
云上持续审计合规最佳实践
本方案是面向云上资源的操作审计和配置审 计,提供的最佳实践。适用于企业型客户。通过最佳实践帮助客户在本场景下更好的使用 阿里云,涉及到配置审计、操作审计、函数计算、SLS、OSS 等服务的实践操作。 解决问题 企业会面临外部对企业云上信息系统的合规要求,如等保2.0法规要求。 同时当云上资源达到一定规模时,在内部会制定合规管控的基线,满足自身管理效率和安全合规的需 求。 包括记录云上资源管理的操作日志、资源配置变更日志,还需依赖云平台提供的持续监控和自动告警能力,实现合规性的自主监管。
详见:https://www.aliyun.com/product/fc 日志服务(SLS):一站式提供数据收集、清洗、分析、可视化和告警功能。全面 提升海量日志处理能力,实时挖掘数据价值,智能助力研发/运维/运营/安全等场景。详见:https://www.aliyun.com/product/sls 对象存储(OSS):使用 RESTful API 可以在互联网任何位置存储和访问,容量和...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,函数计算,操作审计,配置审计
函数计算实现弹性音视频处理系统
函数计算实现弹性音视频处理系统
场景描述 本示例通过函数计算部署一个高弹性高可用的 音视频处理系统。尤其适合视频网站使用,每天 有大量的上传视频,需要及时转码处理以适配各 种终端及网络条件,要求短时间内准备大量的计 算资源进行大规模并行转码处理,同时希望基于 FFmpeg自建的转码服务能简单迁移。 解决问题 1.如何使用函数计算部署音视频处理系统。 2.如何进行系统的压测。 产品列表 函数计算服务 文件存储NAS 对象存储OSS 函数工作流FnF 日志服务SLS
详见 https://cn.aliyun.com/product/fnf 日志服务(SLS):行业领先的日志大数据解决方案,一站式提供数据收集、清洗、分析、可视化和告警功能。全面提升海量日志处理能力,实时挖掘数据价值,智能 助力研发/运维/运营/安全等场景。详见 https://cn.aliyun.com/product/sls 文档版本:20201228(发布日期)III Function ...
来自: 最佳实践 | 相关产品:专有网络 VPC,对象存储 OSS,文件存储NAS,日志服务(SLS),Serverless 工作流
混合云管理平台
阿里云混合云管理平台(Apsara Uni-manager)是面向阿里云专有云和混合云场景的企业级云管理平台,提供全方位的云资源供给、运维和运营管理能力,具备一体化管控、自动化运维、智能化分析及个性化扩展等核心竞争力。
统一云管平台提供精细化资源治理、智能化数据分析和个性化功能扩展等能力,支撑企业云平台降本增效的成本治理理念,降低企业云上的管理成本,建立可视化碳排放的绿色云平台,打造云时代的IT治理标准.专有云运营平台.主动的故障发现.基于模拟用户使用技术,提供真实的云服务健康度检查能力,可以快速检测或者预判到故障的...
来自: 云产品
防汛防台应急管理解决方案
防汛防台应急管理解决方案围绕政府防汛防台减灾应急管理日常和突发事件处置的各项工作,全面提高区域防汛防台应急准备、监测与预警、处置与救援、灾后恢复与重建的各项能力,最大限度地减少、甚至消除台风、洪汛等气象灾害对经济社会发展造成的影响,维护广大人民群众的生命财产安全。
轻松搭建专业水准的可视化应用,满足业务监控、风险预警、地理信息分析等多种业务的展示需求.库存共享\\u00A0.基于阿里云平台数据架构,通过数据中台智能引擎提供科学先进的智慧应急平台底座,可以对突发事件影响范围、影响方式、持续时间、危害程度等方面进行智能研判,提供汛涝及台风灾害趋势预测分析.低成本免开发.覆盖...
来自: 解决方案
基于MaxCompute的大数据BI分析
基于MaxCompute的大数据BI分析
场景描述 本文以电商行业为例,将业务数据和日志数据使用 MaxCompute做ETL之后,同步到ADB进行实时 分析,之后通过QuickBI进行快速可视化展示。 解决问题 1.互联网行业、电商、游戏行业等网站、App、 小程序应用内BI分析场景。 2.可扩展到各类网站BI分析场景使用。 产品列表 1.MaxCompute 2.分析型数据MySQL版 3.日志服务SLS 4.QuickBI 5.云服务器ECS 6.RDSMySQL版
基于 MaxCompute的大数据 BI分析 最佳实践 场景描述 业务架构 本文以电商行业为例,将业务数据和日志数据使用 MaxCompute做 ETL之后,同步到 Hologres进行实时分 析,之后通过 Quick BI进行快速可视化展示。解决问题 1.互联网行业、电商、游戏行业等网站、App、小程 序应用内 BI分析场景。2.扩展到各类网站 BI分析场景...
来自: 最佳实践 | 相关产品:日志服务(SLS),大数据计算服务 MaxCompute,云原生数据仓库AnalyticDB My,Quick BI,云速搭CADT
阿里云云原生观测套件
阿里云云原生可观测套件围绕Prometheus服务、Grafana服务和链路追踪服务,通过标准的PromQL和SQL提供数据大盘展示、告警和数据探索能力。
阿里云云原生观测套件围绕观测监控 Prometheus 版、观测可视化 Grafana 版和可观测链路 OpenTelemetry 版,形成指标存储分析、链路存储分析、异构构数据源集成的观测数据层,通过标准的PromQL和SQL提供数据大盘展示、告警和数据探索能力.咨询&答疑加入钉群:3360022492.阿里云云原生观测套件.连接孤岛,而不是...
来自: 云产品
观测监控 Prometheus 版
覆盖业务自定义监控/应用组件监控/云服务监控/容器监控/系统监控等场景。默认集成Grafana看板与智能告警,全面优化系统可用性与查询能力,用户无需关注系统可用性与Exporter集成。帮助企业快速搭建一站式指标可观测体系。
作为云原生的运维数据可视化平台,面向用户提供免运维和快速启动 Grafana 运行环境的能力,默认集成如数据库 MySQL、消息队列 RockteMQ、实时计算 Flink、Elasticsearch、观测监控 Prometheus 版、日志服务SLS等各类阿里云服务数据源,并提供丰富的数据看板,让运维监控更加高效、精细.观测可视化 Grafana 版.支持按需...
来自: 云产品
智慧屏解决方案
深度融合AI、IoT、安全等核心技术,倾力打造集视频会议、白板书写、无线投屏、高清电视等功能于一体的最优体验,重新定义会议交流、洽谈宣 讲、信息发布、智慧党建等场景。不仅仅是智能会议平板,更是一种全新的信息交互方式。
实现服务管理可视化调度.推进感知态势量化展示.提升沟通协同交互联动.大屏幕有大智慧.全新的交互方式.智慧屏解决方案.深度融合AI、IoT、安全等核心技术,打造集视频会议、白板书写、无线投屏等功能于一体的最优体验,重新定义会议交流、洽谈宣讲、信息发布、智慧党建、门店展示等场景。不仅仅是智能会议平板,更是一种...
来自: 解决方案
图计算服务GraphCompute
阿里云图计算服务GraphCompute是一站式图数据管理和分析平台,支持图数据建模、导入与修改,支持Gremlin语言进行图查询,具备数据加载快、规模可扩展、查询延时低等优势。
查看GraphCompute使用文档.选型介绍及费用说明.了解如何快速使用GraphCompute.功能介绍及使用方法.Gremlin...借助图的可视化展示,一目了然地看清所有设备的情况.设备情况总览.根据设备之间的互联关系,快速定位故障节点,及时修复问题,提升系统稳定性.问题设备跟进.推荐搭配使用.IT设备运维.全网设备智能监管.查看更多商品.
来自: 云产品
在线教育流量洪峰
在线教育流量洪峰
1. 通过Tair缓存的性能增强型解决高并发读的性能问题,通过持久内存型解决大并发写性能及数据可靠性问题。 2. PolarDB作为主数据库保存业务的交易数据,通过弹性能力和并发SQL解决性能瓶颈。 3. ADB+QuickBI提供的数据仓库方案通过分时弹性能力和实时业务展现能力。
阿里云最佳实践分享群 最佳实践频道 产品列表 专有网络 VPC 分布式缓存 Tair 云原生数据库 PolarDB 分析型数据仓库 ADB 如二维码过期,数据可视化分析平台 QuickBI 请搜索群号:31852400 弹性计算 ECS 云服务器 ECS(产品名称)文档模板(手册名称)/文档版本信息 阿里云 在线教育流量洪峰 最佳实践 文档版本:20210120...
来自: 最佳实践 | 相关产品:云数据库 Redis 版,云数据库PolarDB,云原生数据仓库AnalyticDB My,Quick BI
充电桩设备智能解决方案
阿里云充电桩设备智能化解决方案,提供了端、网、云一体的解决方案,帮助客户更低成本、更快捷的完成设备智能化上云,并保障业务持续稳定的运行。
方案可以对前端设备地理位置分布可视化展示,支持设备在线运行情况实时统计,并对设备实时电量监控,预测充电时长,帮助客户经营提效.根据您提交的需求,将有售前专家免费服务!根据您提交的需求,将有售前专家免费服务!售前专家免费服务.企业物联网平台.物联网无线连接服务.阿里云IoT 云模组.向阿里云提交方案详情咨询....
来自: 解决方案
< 1 2 3 4 ... 6 >
共有6页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用