自建ELK迁移阿里云日志服务
自建ELK迁移阿里云日志服务
场景描述 ELK Stack(Elastic/Logstash/Kibana) 通常 被用于日志实时分析, 在开源社区中有大量 的内容和使用案例。 本文介绍如何将自建的 ELK 系统迁移到阿里云 SLS 日志服务。 解决问题 1. 自建 ELK 如何迁移到阿里云日志服务。 2. 如何使用 Logtail 采集日志。 3. 如何使用阿里云日志服务对日志进行查 询、 分析。 产品列表  阿里云日志服务(SLS)  VPN 网关  IPSec VPN  云服务器
作者 审核人 说明 V1.0 2020-02-11 期会、丁健 云魁、周郎 创建 迭代迁移工具、SLS统计分 V1.1 2020-03-10 期会、和颐 部分内容 V1.2 2024-04-11 厉博、楼岚 更新CADT支持、文档描述 V1.3 2024-04-22 游圣 优化CADT模版、优化文档 文档版本:20240422 I自建ELK迁移阿里云日志服务(SLS)目录 目录 文档版本信息.I 法律...
来自: 最佳实践 相关产品:云服务器ECS,日志服务(SLS)
游戏数据运营融合分析
游戏数据运营融合<em>分析</em>
场景描述 1.游戏行业有结构化和非结构化数据融合分 析需求的客户。 2.游戏行业有数据实时分析需求的客户,无法 接受T+1延迟。 3.对数据成本有一定诉求的客户,希望物尽其 用尽量优化成本。 4.其他行业有类似需求的客户。 方案优势/解决问题 1.秒级实时分析:依托ADB计算密集型实例, 秒级监控DAU等数据,为广告投放效果提 供有力的在线决策支撑。 2.高效数据融合分析:打通结构化和非结构化 数据,支撑产品体验分析;广告买量投放效 果实时(分钟级)分析,渠道的评估更准确。 3.低成本:DLA融合冷数据分析+ADB存储密 集型温数据分析+ADB计算密集型热数据分 析,在满足各种分析场景需求的同时,有效 地降低的客户的总体使用成本。 4.学习成本低:DLA和ADB兼容标准SQL语 法,无需额外学习其他技术。 产品列表 专有网络VPC、负载均衡SLB、NAT网关、弹性公网IP 云服务器ECS、日志服务SLS、对象存储OSS 数据库RDSMySQL、数据传输服务DTS、数据管理DMS 分析型数据库MySQL版ADS 数据湖分析DLA、QuickBI
通过 RAM,您可以集中管理您的用户(比如员工、系统或应用程序),以及控制用户可以访问您名下哪些资源的权限。更多信息,请参见:help.aliyun.com/document_detail/28672.html NAT网关:NAT网关(NAT Gateway)是一款企业级的公网网关,提供 NAT代 文档版本:20210224 III 游戏数据运营融合分析 前言 理(SNAT和 DNAT)、...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,对象存储 OSS,云原生数据仓库AnalyticDB My,数据湖分析,Quick BI
自建Hive数仓迁移到阿里云EMR
自建Hive数仓迁移到阿里云EMR
场景描述 客户在IDC或者公有云环境自建Hadoop集群构 建数据仓库和分析系统,购买阿里云EMR集群之 后,涉及到将数据仓库和Hive元数据的数据库迁 移上云。目前主流Hive数据仓库迁移场景为1.x 版本迁移到阿里云EMR(Hive2.x版本),涉及到 数据订正更新步骤。 解决的问题 Hive数据仓库的数据迁移方案 Hive元数据库的迁移方案 Hive跨版本迁移后的数据订正 产品列表 E-MapReduce,VPC,ECS,OSS,VPN网关。
其优点是学习成本低,可以通过类 SQL语句快速实 现简单的 MapReduce统计,不必开发专门的 MapReduce应用,十分适合数据仓 库的统计分析。E-MapReduce 阿里云 E-MapReduce(EMR)是构建在阿里云云服务器 ECS 上的开源 Hadoop、Spark、HBase、Hive、Flink生态大数据 PaaS 产品。提供用户在云上使用开源 技术建设数据仓库、...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,VPN网关,E-MapReduce,云速搭
程序
mPaaS 小程序,源自于支付宝小程序框架,亿级线上业务体量的锤炼,安全性媲美支付宝原生能力。不仅面向自有 App 投放小程序,更可快速构建打包,覆盖支付宝、淘宝、钉钉等应用。
开通 mPaaS,创建 mPaaS App,并下载配置.查看开发文档.使用 mPaaS IDE 插件,将小程序框架添加至您的...继承支付宝小程序核心优势,实时预览、一键真机预览、调试发布等能力开箱即.完善的开发体系.任一业务模块,不止生长于自有 App,更以小程序的形式向多端实现投放。任何 App 都可以想象自己的场景生态.实现多端投放.
来自: 云产品
基于MaxCompute的大数据BI分析
基于MaxCompute的大数据BI<em>分析</em>
场景描述 本文以电商行业为例,将业务数据和日志数据使用 MaxCompute做ETL之后,同步到ADB进行实时 分析,之后通过QuickBI进行快速可视化展示。 解决问题 1.互联网行业、电商、游戏行业等网站、App、 小程序应用内BI分析场景。 2.可扩展到各类网站BI分析场景使用。 产品列表 1.MaxCompute 2.分析型数据MySQL版 3.日志服务SLS 4.QuickBI 5.云服务器ECS 6.RDSMySQL版
基于 MaxCompute的大数据 BI分析 最佳实践 场景描述 业务架构 本文以电商行业为例,将业务数据和日志数据使用 MaxCompute做 ETL之后,同步到 Hologres进行实时 ,之后通过 Quick BI进行快速可视化展示。解决问题 1.互联网行业、电商、游戏行业等网站、App、小程 序应用内 BI分析场景。2.可扩展到各类网站 BI分析场景...
来自: 最佳实践 | 相关产品:日志服务(SLS),大数据计算服务 MaxCompute,云原生数据仓库AnalyticDB My,Quick BI,云速搭CADT
可观测链路 OpenTelemetry 版
针对 PHP、C++、Go、Node.js 等多语言应用,提供端到端全链路追踪、应用监控与告警、链路拓扑、日志关联分析能力,并基于 OpenTelemetry 开源标准,兼容 Jaeger、Zipkin、SkyWalking 等开源项目数据上报。快速发现分布式应用架构下的性能瓶颈,缩短错/慢调用根因定位耗时,提高全栈开发与诊断效率。
更多产品与服务.ARMS应用监控-每月50GB免费额度,满足分布式应用监控与链路追踪需求.ARMS前端监控-每月50GB免费额度,满足网站、小程序、APP监控需求.可观测监控Prometheus版-每月50GB免费额度,满足容器/云服务监控需求.可观测产品推荐.可观测可视化Grafana版-首月专家版(10U)免费.ARMS云拨测-每月3000次免费拨测额度,...
来自: 云产品
移动分析
移动分析 MAS,源于阿里云移动开发平台。移动分析 MAS,通过多端埋点数据的采集与分析,实现产品核心指标监控。帮助企业更好的完成业务监控、用户洞察与行为分析,指导产品迭代,精细化产品运营,辅助营销决策,加速业务商业化。
移动分析 MAS 提供应用稳定性分析,包括闪退监控、异常监控、性能监控用户诊断功能,帮助开发人员及时发现、定位问题.移动分析 MAS 提供应用问题诊断,包括个人用户诊断和诊断日志采集两部分.提升用户活跃度和留存率,为营销活动赋能。从核心数据角度出发,提供有效的用户触达方式和运营策略。洞察端上用户行为数据,针对...
来自: 云产品
云效效能洞察Insight
云效效能洞察Insight是阿里云旗下专业的交付过程监控和研发效能度量、分析平台。提供场景化的效能度量模版和丰富的效能指标,可视化研发效能状态,指导研发效能改进。
应用为核心的云原生应用交付平台,提供对开发者友好的应用编排、环境管理、部署运维、资源管理、应用发布等一站式应用交付能力.云效应用交付.提供基于Maven、Gradle、NPM等软件包管理工具的企业级私有仓库服务,用于管理企业级依赖托管.云效制品仓库.标准化管理测试用例,快速搭建一体化「开发->测试->反馈」流程,有效提升...
来自: 云产品
基因计算分析解决方案
基因测序技术日新月异,围绕着基因组学的基础科学研究和临床医学应用,也正在取得突破性的进展。阿里云为海量基因组学数据的计算分析提供高效安全的完整解决方案,帮助生物科技公司、科研人员和医疗健康机构构建广泛可靠、敏捷智能的基础平台和业务系统。
与本地 HPC 集群环境完全一致,应用程序无需任何改造,可以直接在阿里云环境运行.不需要固定集群,提供任务队列级别的计算节点扩缩容,从0到上千台几台。结合按需、竞价实例、预留实例券等付费方案,提供远超传统 HPC 集群的灵活性.使用 NAS、CPFS 等高吞吐文件系统,提供作业级别的任务监控,最大化调整和保障分析性能....
来自: 解决方案
智能对话分析
阿里云智能对话分析帮助企业从海量对话录音或对话文本中挖掘可能存在的风险点和商机,同时提升企业服务质量、监控舆情风险、优化服务策略,智能对话分析典型应用场景有智能客服质检、销售线索分析等。
智能对话分析(Smart Conversation Analysis)帮助企业从海量对话录音或对话文本中挖掘可能存在的风险点和商机,同时提升企业服务质量、监控舆情风险、优化服务策略,典型应用场景有智能客服质检、销售线索分析等。售前咨询,请添加钉钉:cccsupport2.智能对话分析.支持从语义、语音、AI模型、流程四大维度发起质检,共30+...
来自: 云产品
阿里云时序时空数据库TSDB
时序时空数据库 ( Time Series and Spatial-Temporal Database , 简称 TSDB) 是一种集时序数据高效读写,压缩存储,实时计算能力为一体的数据库服务,可广泛应用于物联网和互联网领域,实现对设备及业务服务的实时监控,实时预测告警。
精心打造的功能.TSDB所有相关文档.TSDB应用程序,协议描述等.如何创建释放,白名单设置等.了解如何快速使用 TSDB 服务.查看全部日志>.千万数据点实时读写.高效压缩算法,单数据点~2Byte,降低存储成本>90%.支持降精度,插值,丰富聚合计算函数支持.强大数据分析能力.通用时序协议支持,使用简单;全面监控运维.零距离接触...
来自: 云产品
可观测可视化 Grafana 版
可观测可视化 Grafana 版作为云原生数据可视化平台,为运维SRE、研发工程师、产品经理、市场营销等不同角色提供开箱即用的一站式可视化平台,满足运维监控、经营分析、汇报展示等不同场景的查询、可视化、告警需求。
可观测链路 OpenTelemetry 版为分布式应用的开发者提供了完整的调用链路还原、调用请求量统计、链路拓扑、应用依赖分析等工具。快速分析和诊断分布式应用架构下的性能瓶颈,缩短异常定位时间,提高微服框架下开发诊断效率.可观测链路 OpenTelemetry 版.默认集成各种云服务.默认集成 ARMS、Prometheus、云监控、日志服务等...
来自: 云产品
阿里云解决方案基因专题
阿里云解决方案包括通用解决方案, 行业解决方案和生态解决方案,沉淀阿里云十年、百万用户最全面的业务场景,结合阿里巴巴集团技术创新能力,提供云原生、数据智能、零售、金融、制造等多个领域的解决方案。
从资源利用效率,计算存储IO优化,算法与硬件加速等多个方面,提供高效经济的分析应用.基因分析应用加速方案.开放常用参考注释文件、大型科研项目数据、以及最新测序平台标准等数据。借助阿里云的计算规模和最新产品技术,立刻开始分析研究工作.基因公共数据集计划.解决方案全景.量身定制解决方案.1v1咨询,分析上云即可....
来自: 解决方案
智能外呼机器人
阿里云智能外呼机器人即通过业务的场景自动发起的电话外呼任务。支持灵活画布配置,精准语音识别、自然人声合成、丰富开放API。通过人与机器人的语音对话交互收集业务结果,并对数据加以统计处理,获取用户反馈,帮助客户轻松实现智能化外呼。能够降低呼叫中心人力外呼成本,提升信息筛选及反馈效率。
能帮助企业提升服务质量、监控舆情风险、优化服务策略,典型应用场景有智能客服质检、销售机会分析等.智能对话分析.云联络中心为企业提供整体的企业智能化客服平台。打通热线电话、网站、小程序、APP等用户与企业的联系渠道,帮助企业统一管理服务体验,并利用AI能力升级数字员工服务与坐席智能辅助体系,全面提高服务体验...
来自: 云产品
营销引擎云码
营销引擎云码(Intelligent Marketing Engine)是阿里云-企业云服务的数字化营销工具平台,围绕企业全域业务增长的目标,提供营销投放、用户建模、智能分发以及消费者触达的一站式全链路SaaS工具平台,并以营销效果为计费单元。
面对品牌用户通过IoT自助设备、线下聚合支付、支付宝小程序、各类垂直App流量、使用智能营销引擎细致的行业人群标签流量场景的定向能力,在各类垂直App的流量中可以精准定向目标用户,完成商品推广和表单收集等业务.面向众多品牌用户,采用CPC、CPM的计价方式,通过各类垂直类App,使用行业标签流量场景,深度挖掘商机...
来自: 云产品
云效项目协作Projex
阿里云云效项目协作 Projex提供项目管理、迭代规划、需求管理、缺陷管理、任务管理等项目管理功能及效能数据统计,支持单项目管理、跨项目协作等丰富的协作场景
应用为核心的云原生应用交付平台,提供对开发者友好的应用编排、环境管理、部署运维、资源管理、应用发布等一站式应用交付能力.云效应用交付.提供灵活易用的持续集成、持续验证、持续发布功能,帮助企业高质量、高效率的交付业务.提供基于Maven、Gradle、Helm等软件包管理工具的企业级私有仓库服务,用于管理企业级依赖托管...
来自: 云产品
云呼叫中心
阿里云呼叫中心(Cloud Call Center)是阿里云推出的企业级智能联络中心类产品,为客户提供灵活的坐席扩展能力、高性能的分布式服务以及丰富的OpenAPI能力,搭配智能排队路由、可视化IVR以及阿里云智能客服产品体系,轻松搭建智能化的联络中心服务。
能帮助企业提升服务质量、监控舆情风险、优化服务策略,典型应用场景有智能客服质检、销售机会分析等,无缝嵌入智能呼叫中心.智能对话分析.基于语音识别和合成,机器学习和自然语言理解等技术,在智能呼叫中心中IVR中预置导航模块,在传统的热线电话中加入了语音业务自助办理/语音问答功能,可有效的处理常规业务场景,大幅...
来自: 云产品
云上成本优化workshop
云上成本优化workshop
某金融科技公司,它主要提供信贷,理财,电商等 服务,目前已经拥有千万级注册用户。该公司在将 在线业务系统和大数据业务从自建 IDC 机房迁移 到阿里云后,今年大数据集群经历过多次因为资 源不足导致弹性扩容失败的故障,运维负责人非 常苦恼。由于该公司从事互联网金融的借贷业务, 白天的催收非常依赖晚上大数据计算的结果,若 因为资源不足导致计算结果失败则意味着白天催 收业务员无事可做,会对公司业务造成严重影响。 后来,通过阿里云解决方案架构师建议的方案,将 大数据集群迁移到资源较充足的可用区以及配置 弹性伸缩多规格 ECS 选型增加交付成功率等方 法,目前已阶段性的解决因资源不足导致弹性扩 容失败的问题,但该方案在 Spot 计算资源不足 时,启用大量按量收费算力,带来了较高的成本, 并且抢占式实例和按量付费实例都不保证资源 100%交付,还是存在交付失败的可能性,特别是 在双 11 期间由于其他客户的资源需求上升带来 的资源挤兑客观上存在,就进一步增加了弹性扩 容失败的风险,从而影响业务正常运行。
应用程序的分布度、可扩展性和容错能力越高,越 适合使用抢占式实例节省成本和提升吞吐量。有状态应用不宜使用抢占式实例,例如 数据库。因为竞价失败等原因导致抢占式实例被释放时,应用状态难以保存。文档版本:20210329 21 云上成本优化 workshop 计费优化 在使用抢占式实例时,要重点注意以下两点 保护期:抢占式实例...
来自: 最佳实践 | 相关产品:云服务器ECS,负载均衡 SLB,弹性公网IP,容器服务 ACK,日志服务(SLS),NAT网关,函数计算,E-MapReduce,云数据库PolarDB,弹性容器实例 ECI,存储容量单位包,预留实例券,Hologres
终端访问控制系统UEM
阿里云终端访问控制系统UEM是以网络安全准入、终端安全管理、应用管理为基础的远程办公零信任解决方案产品,帮助用户构建安全、高效、易用的远程办公能力,支持基于多因素动态安全分析及准入,支持全终端类型全生命周期的管理能力
支持对设备硬件信息、系统信息以及软件列表信息抓取,并支持对软件数据进行可视化报表统计.终端安全基线检查.支持对不符和安全基线要求的终端禁止入网或告警,如安装了黑名单应用的设备禁止入网.终端入网管理.对指定的人或者设备,进行冻结、锁定以及挂失等操作,以实现禁止非法设备入网.支持管理Windows、macOS、Android和...
来自: 云产品
< 1 2 3 4 ... 7 >
共有7页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用