基于日志服务构建业务可观测性系统
基于日志服务构建业务可观测性系统
现在已知的各种监控数据的工具,以及对应的监控系统有非常多的选择,比如ZABBIX,Prometheus,Skywalking等。但是这些系统都存在同样的一个问题,只覆盖了可观察性的一部分,举个简单的类比,大家在日常开车的过程中,会用到很多的辅助设备,仪表盘,行车记录仪,导航,倒车影像等等,这些设备都各自承载了一部分的功能,但是都存在着如下的问题: l 数据覆盖不完整 l 存在数据孤岛(无法关联协同) l 使用门槛高,不够人性化 核心价值 l 全覆盖,统一协议,支持各类平台。 l 数据关联,统一Schema,关联Metrics/Logs。 l 云原生,SaaS服务,拥抱云原生。 l 简单易用,自动化埋点,数十项易用功能。 智能化,异常诊断,根因分析。
但是这些系统都存 在同样的一个问题,只覆盖了可观察性的一部分,举个简单的类比,大家在日常开车的过程中,会用 到很多的辅助设备,仪表盘,行车记录仪,导航,倒车影像等等,这些设备都各自承载了一部分的 功能,但是都存在着如下的问题:数据覆盖不完整 存在数据孤岛(无法关联协同)使用门槛高,不够人性化 核心价值 ...
来自: 最佳实践 相关产品:云服务器ECS,容器服务 ACK,日志服务(SLS)
E-HPC低成本实现量化策略回测
E-HPC低成本实现量化策略回测
在量化交易场景下,量化策略的构建流程一般包括:想法、数据获取、建模、回测、结果分析等,在回测过程中往往需要海量的算力,进行大量数据的分析和处理,如何快速、高效和低成本的进行批量任务的调度,并快速获取结果是量化领域遇到的普遍挑战,这也是云计算能够带给客户的巨大优势。
专有网络由逻辑 网络设备(如虚拟路由器,虚拟交换机)组成,可以通过专线/VPN等连接方式与 传统数据中心组成一个按需定制的网络环境,实现应用的平滑迁移上云。详见:https://www.aliyun.com/product/vpc 弹性高性能计算 E-HPC:基于阿里云基础设施,拥有公有云、专有云等多种产品 形态,为用户提供一站式 HPC/HPDA平台...
来自: 最佳实践 | 相关产品:专有网络 VPC,对象存储 OSS,弹性公网IP,文件存储NAS,弹性高性能计算E-HPC,云速搭
网盘与相册服务PDS
网盘与相册服务(简称PDS)是阿里云为客户提供的面向企业、团队与个人的数据管理开放平台,提供一站式数据存储、分析和AI的能力。方便客户快速高效的构建可支撑海量用户的网盘与相册服务,同时针对团队及个人用户,支持免开发开箱即用。
将已存储在阿里云OSS中的数据托管给相册与网盘服务PDS管理,PDS提供基于Drive、目录、文件的管理视图,提供给最终用户使用,并保留使用OSS原有接口的访问,完成数据在应用和用户间的联动以及和合作伙伴间的数据传递.将OSS中的数据通过简单配置,提供给最终用户(自建用户或钉钉、支付宝、淘宝等用户)受控使用.将应用(如...
来自: 云产品
KVM on弹性裸金属
KVM on弹性裸金属
场景描述 神龙是一款兼具虚拟机弹性和物理机性能及特性的 新型计算产品,为用户上云提供便捷。上一篇《阿里 云弹性裸金属最佳实践之VMwareon神龙》介绍了 基于阿里云神龙部署VMware,本篇指导用户基于神 龙自行创建KVM虚拟机。用户在将线下基于KVM 的业务灵活部署上云的同时,可充分管理和利用云上 计算资源。 解决问题 1.为传统企业提供在阿里云上自建KVM虚拟化平 台的解决方案。 2.基于KVM虚拟化平台的系统如何迁移上云。 产品列表 1.弹性裸金属服务器 2.文件系统NAS 3.弹性公网IP
配置项 说明 地域 华东2(上海)可用区 上海可用区E 类型 高级 容量 500GB 吞吐 150MB/s 文档版本:20191213 25 KVMon弹性裸金属 基础环境配置 配置完成后,点击右侧的立即购买。步骤4 在确认订单页面,确认商品信息。确认无误,阅读、同意并勾选《极速NAS(按量 付费)服务协议》,单击去开通。步骤5 开通任务提交成功...
来自: 最佳实践 | 相关产品:弹性公网IP,文件存储NAS,弹性裸金属服务器(神龙)
混合云存储
阿里云混合云存储包括混合云存储阵列、混合云CPFS存储、混合云分布式存储等多种产品类型。本地存储可以通过云缓存、云同步、云备份等方式无缝连通云存储,轻松实现云端一体。
在金融、医院、教育、设计公司等行业,办公系统,文件服务器,数据库和虚拟化平台需要高可靠、高性能存储,重要数据异地互满足等保需求,同时企业还希望把老旧存储设备利用起来.现行核心数据库的存储系统存在性能瓶颈,无法满足业务及多部门共享数据的应用需求。新存储系统需提供高性能的存储服务.需要保证关键业务连续不...
来自: 云产品
阿里云DNS
阿里云DNS覆盖了公网权威域名解析、内网域名解析、移动解析以及专有云的域名解析场景。为广大用户提供稳定、安全、快速、智能的域名解析服务,助力网站快速实现域名迁移及网站搭建,企业上云就来阿里云。
宽带耗尽的DNS反弹式拒绝服务攻击.解决受害DNS服务器网络受阻、业务中断的问题.可承受每秒过亿次DNS查询.解决大型企业业务访问量高,QPS解析请求量高的问题.内网域名解析时,私有域名只能在被与之关联的VPC内进行访问.支持自定义域名托管Zone及各种后缀与子域名,满足企业在构建私有域名DNS系统时的定制化需求.能够实现...
来自: 云产品
企业资质识别
阿里云企业资质识别支持各类资产证件的识别。企业资产如营业执照识别,可结构化识别出注册号,公司名称,公司地址,法人代表,营业期限等多个字段; 房产证识别可识别多种商品性质房源,快速准确识别房屋性质,坐落,权利人等10个字段。结构化输出业务所需的字段,方便工作人员审核录入,核对,有效节约人力时间成本。
集成到移动APP、Android、iOS或设备端中,无需网络即可实现文字识别功能.OCR全品免费试用.OCR应用场景案例.针对国际贸易行业的各类单证提供智能识别和抽取能力.全新OCR文档自学习平台,无需开发,一站式工具平台.体验文档智能产品,赢取大额猫超卡+达摩院文创等多重奖品.线上测试地址,给您直观的视觉体验.身份证识别支持...
来自: 云产品
本地数据中心基于SMB/NFS协议访问对象存储最佳实践
本地数据中心基于SMB/NFS协议访问对象存储最佳实践
1. 云存储扩容和迁移 集成智能缓存算法,自动识别冷热数据,将热数据保留在本地缓存,保证数据访问体验,无感知的将海量云存储数据接入本地数据中心,拓展存储空间。同时在云端 保留全量数据(冷+热)保证数据的一致性 2.云容灾 随着云计算的普及,越来越多的用户把自己的业务放到了云上。但是随着业务的发展,如何提高业务的可靠性和连续性,跨云容灾是一个比较热门的话题。借助云存 储网关对虚拟化的全面支持,可以轻松应对各种第三方云厂商对接阿里云的数据容灾。 3. 多地数据共享和分发 通过多个异地部署的文件网关实例,对接同一个阿里云OSS Bucket,可以实现快速的异地文件共享和分发,非常适合多个分支机构之间互相同步和共享数据。 4. 适配传统应用 有很多用户在云上的业务是新老业务的结合,老业务是从数据中心迁移过来的使用的是标准的存储协议,例如: NFS/SMB/iSCSI。新的应用往往采用比较新的技 术,支持对象访问的协议。如何沟通两种业务之间的数据是一个比较麻烦的事情,云存储网关正好起到一个桥梁的作用,可以便捷的沟通新旧业务,进行数据交换。 5. 替代 ossfs 和 ossftp ossfs 和 ossftp 都是基于文件协议的开源工具,用户可以通过它们直接上传文件到OSS。但是这两个开源文件都不建议在生产环境使用(POSIX 兼容度低),同时挂 载在用户的客户端需要额外的配置和缓存资源,对于多个客户端的情况安装配置繁琐。通过文件网关的服务可以完美替代 ossfs 和 ossftp。通过创建文件网关,用 户只需要执行简单的挂载(NFS)和映射(Windows SMB)就可以像使用本地文件系统一样使用 OSS。
块网关:块网关在 OSS中创建存储卷,提供 Internet小型计算机系统接口(iSCSI)协议访问。本地应用程序可将这些卷作为 iSCSI目标进行访问。块网关提供两种 模式:透传模式和缓存模式。透传模式可以将块卷数据切片同步上云,适用于专线 等高速链路客户;缓存模式提供本地缓存盘进行读写加速,缓存数据异步上云,适 用于期望...
来自: 最佳实践 | 相关产品:对象存储 OSS,云存储网关
基于DDH+MyBase降本合规
基于DDH+MyBase降本合规
出版、金融、保险等传统行业一方面希望能借助云计算以更好地适应业务发展需求(政策上云),另一方面出于对降低单实例部署成本(CPU 超分超配)以及满足更严格合规和监管要求的考虑,希望能对云上资源有更多的自主控制权(监管合规)。从业务系统架构云上部署的角度,基于专有宿主机DDH 和云数据库专属集群MyBase 的解决方案,可以很好地满足这两方面的需求。 解决问题: 1. 国家政策上云趋势和需求 2. 更严格的云上安全合规要求 3. 对云上资源有更灵活的管控权 4. 有效降低企业上云的整体拥有成本(TCO) 方案优势: 1、单租户隔离 DDH和 MyBase都可以提供宿主机级别物理隔离,可以独占资源,可以开放更多接口 , 同时杜绝 多租户间 干扰 。 2、安全合规:在完备的隔离基础之上,开放更多数据库权限和 OS权限 。 3、资源灵活部署和调度 创建 ECS实例、从共享宿主机迁移 ECS实例至专有宿主机或在专有宿主机之间迁移 ECS实例时,若您不指定专有宿主机,系统将自动帮您选择专有宿主机部署实例。 针对于初始部署数据库实例时,提 供紧凑型和均衡型两种方式将数据库实例分不到不同的主机上。 4、超配 降本 DDH和 MyBase组合的方式可以实现资源自定义 CPU内存 配比以及CPU超分 ,可以降低单 ECS实例以及云数据库实例的部署成本。
付费方式:为了便于演示默认按量付费 本例所有运行命令脚本可从 https://code.aliyun.com/best-practice/181.git 获取 数据库系统为 MySQL5.7版本 文档版本:20220414 3 基于 DDH+MyBase降本合规最佳实践 资源规划 资源规划 标红部分需要替换成自密码 大 明细项 信息明细 说明 VPC规划 VPC信息 地理位置:杭州 内部业务...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,负载均衡 SLB,弹性公网IP,专有宿主机,云数据库专属集群MyBase,云速搭
Dubbo应用上云
Dubbo应用上云
场景描述 本最佳实践适用于企业自建 Dubbo 应用上云, 应 用采用 docker 方式部署, 降低部署成本。同时利 用 MSE 提供 Zookeeper 服务注册管理。 通过阿 里云的 ARMS 和 AHAS 服务提供应用监控和服务 限流管理,简化运维并提供服务的全生命周期管 理。 解决问题 1. 自建 dubbo 应用迁移上阿里云。 2. 应用部署在容器内降低成本。 3. 通过 MSE 提供 ZK 服务,提高稳定性。 4. 通过 ARMS/AHAS 提供监控和服务限流能力 产品列表 容器服务 Kubernetes 版(ACK) 微服务引擎(MSE) 关系数据库服务(RDS) 应用高可用服务(AHAS) 应用实时监控服务(ARMS)
无需提前采购硬件设备,根据业务需要,随时创建所需数量的云服务器 ECS 实例。在使用过程中,随着业务的扩展,可以随时扩容磁盘、增加带宽。也能随时 释放资源,节省费用。更多信息,请参见:https://www.aliyun.com/product/ecs MSE:微服务引擎(MSE)是开源注册、配置中心的全托管平台,提供高可用、免运维的 ZooKeeper、...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,容器服务 ACK,应用实时监控服务 ARMS ,应用高可用服务 AHAS,微服务引擎,云速搭
微服务引擎MSE
微服务引擎 MSE 面向业界注册配置中心、分布式协调、云原生网关、微服务治理和分布式任务调度等主流开源项目,提供商业版服务。
容器服务带来的应用托管的能力,但是不具备细粒度的服务管理和流量治理能力,通过标准、无侵入的入方式让应用具备全面的服务治理能力.MSE作为一款BaaS产品,提供了免运维,高可用的引擎服务,可以使用在大数据,微服务领域.如果企业使用HBase、Spark或Kafka等开源软件,则使用MSE提供的ZooKeeper、Eureka和Nacos可以...
来自: 云产品
AK防泄漏
AK防泄漏
场景描述 用户名密码是开发运维人员访问阿里云控制台 的凭据,AK是软件程序访问阿里云资源的凭据。 如果AK被泄露,那么会造成非常严重的后果, 比如资源被释放导致业务不可用、大量服务器被 创建用来挖矿,等等。采用合适的方式来使用、 保护AK,是每一个云客户都必须关注的问题。 解决问题 1.避免AK被泄露 2.改进已经错误使用AK的方法 产品列表 访问控制RAM 云服务器ECS 操作审计Action Trail 云安全中心
在云安全中心控制台选择威胁检测>安全告警处理,可以按照云产品威胁检测告警 来查找是否有 AK异常调用的告警;如果出现告警,说明已经有黑客在使用 AK干“坏事”了,已经不仅仅是泄露的问题了。文档版本:20220211 46 AK防泄漏 云安全中心异常检测 文档版本:20220211 47 AK防泄漏 操作审计 Action Trail日志 8.操作...
来自: 最佳实践 | 相关产品:云服务器ECS,访问控制,云安全中心,操作审计,云速搭CADT
实时计算Flink版
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,具备实时应用的作业开发、数据调试、运行与监控、自动调优、智能诊断等全生命周期能力。内核引擎100%兼容Apache Flink,2倍性能提升,拥有FlinkCDC、动态CEP等企业级增值功能,内置丰富上下游连接器,助力企业构建高效、稳定和强大的实时数据应用。
主流媒体如新闻、短视频、直播等输出方式,建立标准化通用化场景,业务管控更快捷.针对内容分享平台业务个性化需求,通过实时计算进行业务精细化运营,增加用户粘性和消费欲望.实时计算Flink版.实时数仓 Hologres.场景架构-复杂-copy.唐家哲,靖鑫,也树.通过实时计算Flink版进行实时内容热点分析,实时用户行为分析,...
来自: 云产品
VMware on 弹性裸金属
VMware on 弹性裸金属
场景描述 传统企业将VMware迁移到阿里云弹性裸 金属,利用云计算平台提供的弹性基础设 施,降低部分运维成本和学习成本,使用其 擅长的技术工具专注自身业务,实现线下业 务平滑迁移上云。 解决问题 1.VMware业务平滑迁移上云 2.集成云产品能力增强业务创新 3.降低混合云成本和复杂度 4.增强系统可用性 产品列表 EBM神龙 ECS NAS OSS ENI NAT EIP
步骤6 在设备列表中,通过nsx-management、nsx-controller、nsx-edge三张网卡的PCIE ID定位到并勾选它们,单击切换直通。说明:您可以在3.4章节中查看网卡名称和PCIE设备ID的对应关系。文档版本:20191121 76 VMwareon弹性裸金属 安装和部署VMware 步骤7 设置完成后,前往阿里云ECS控制台重启ebm-network主机,使设置...
来自: 最佳实践 | 相关产品:云服务器ECS,弹性公网IP,文件存储NAS,NAT网关,弹性裸金属服务器(神龙)
ACK容器平台集群安全控制
ACK容器平台集群安全控制
场景描述 本方案实践主要是通过一些实践示例来介绍 用户对于在阿里云上使用Kubernetes集群服 务的容器平台安全管控的实践验证与使用建 议。 方案优势 容器集群部署快捷 授权与安全策略配置方便 丰富的安全控制实践介绍 解决问题 容器集群API Server的安全访问控 制 容器服务多租户场景下的授权管理 容器中的敏感信息数据的存储 容器服务集群安全策略配置管理 产品列表 容器服务Kubernetes版 负载均衡SLB 专有网络VPC 访问控制RAM
文档版本:20220207 17 ACK容器平台集群安全控制最佳实践 Kubernetes集群API Server认证与授权 关于何时使用具体的 role和 binding的建议如下 访问的资源 使用的角色类型 使用的绑定类型 集群级别的资源(Nodes、ClusterRole ClusterRoleBinding PersistentVolumes、….)非资源 URL(/api等)ClusterRole ...
来自: 最佳实践 | 相关产品:专有网络 VPC,负载均衡 SLB,容器服务 ACK,访问控制,云速搭
数据库异地灾
数据库异地灾<em>备</em>
场景描述 适用于不满足于单地域,对数据可靠性 (RPO)和服务可用性(RTO)要求更高 的,希望防范断电、断网等机房故障,抵 御地震、台风等自然灾害,具备异地容灾 备份恢复能力的客户业务场景。 解决问题 1.实时备份,RPO达到秒级 2.表级恢复,故障恢复时间大大缩短 3.长期归档,自动管理备份生命周期 4.异地灾备,构建数据库灾备中心 产品列表 专有网络VPC 云服务器ECS 弹性公网IP(EIP) 负载均衡SLB 云数据库RDSMySQL 数据库备份服务DBS 对象存储服务OSS 数据湖分析服务DLA 数据管理服务DMS 数据传输服务DTS
具有与平台无关的 RESTful API接口,您可以在 任何应用、任何时间、任何地点存储和访问任意类型的数据。详见:https://www.aliyun.com/product/oss DLA:数据湖分析服务(Data Lake Analytics,简称 DLA)。无服务器(Serverless)化的云上交互式查询分析服务。无需 ETL,就可通过此服务在云上通过标准 JDBC 直接对阿里云 ...
来自: 最佳实践 | 相关产品:云数据库RDS MySQL 版,对象存储 OSS,数据管理,数据湖分析,数据库备份DBS,云速搭CADT
超级计算集群实现自然语言处理训练
超级计算集群实现自然语言处理训练
场景描述 本方案适用于自然语言训练场景,使用神龙 GPU云服务器(SCCGN6)+CPFS进行NLP的 训练,采用Bert模型。这里不使用容器,直接 使用裸机进行NLP的Bert训练,使用飞天AI加 速训练工具可以有效提升多机多卡的训练效率。 解决问题 使用神龙GPU云服务器搭建NLP训练环 境 使用SCC的RDMA网络 使用CPFS存储训练数据 使用飞天AI加速训练工具加速训练 产品列表 神龙GPU云服务器(SCCGN6) SCC超级计算集群 CPFS共享存储
 提供PerseusHorovod的接口,分别支持Tensorflow和Pytorch。 提供dist_sync_perseus的基于allreduce的kvstoremodule,支持MXNet。 提供BVLCCaffe的支持。AIACC针对阿里云环境进行了深度优化,核心代码是多框架共享的,各框架的支 持均包含以下功能: 梯度融合通信的自适应多流,自适应梯度融合,对带宽密集的网络...
来自: 最佳实践 | 相关产品:文件存储NAS,超级计算集群
通过ES兼容接口方式使用Kibana访问SLS数据
通过ES兼容<em>接口</em>方式使用Kibana访问SLS数据
自建ELK日志系统的客户迁移到阿里云日志服务SLS后,对SLS查询分析语法不太熟悉的客户,可以继续沿用原有的查询分析习惯,在不改变使用方式习惯的情况下,通过Elasticsearch兼容接口的方式使用Kibana访问SLS。
通过ES兼容接口方式使用Kibana访问SLS数据最佳实践 业务架构 场景描述 日志服务SLS提供Elasticsearch兼容接口,支 持客户将日志采集到日志服务后,仍可以继续沿 用Elasticsearch的查询方案,即通过使用 Kibana访问日志服务的Elasticsearch兼容 ,实现查询SLS数据。应用场景 自建ELK日志系统的客户迁移到阿里云日志服 务...
来自: 最佳实践 | 相关产品:云服务器ECS,容器服务 ACK,日志服务(SLS)
IoT 设备身份认证
阿里云 IoT设备身份认证提供身份认证、通道加密和业务数据加密等能力,实现物联网数据可信上云和可信上链。提供公共云、一体机、专有云、多云等部署模式。
IoT 设备身份认证 IoT 设备身份认证 ID²(IoT Device ID)为物联网设备提供上云的可信身份凭证,防范未经授权的设备接入、敏感数据泄漏或篡改、虚假数据上报、设备非法操控等风险,保障物联网数据安全上云。管理控制台ID²安全芯片 帮助与文档 提交咨询 成为合作伙伴产品优势产品功能应用场景权威评测产品规格产品动态文档...
来自: 云产品
机床设备管理解决方案
工业母机 机床设备管理解决方案通过数控机床转速和主轴振幅数据的实时或定时采集,抽取共振点的转速-振幅,通过对历史数据训练预测模型,预测机床运行中的异常设置和故障。指导规避缺陷转速排产,减少次品率的发生、对主轴和道具的损耗。分析共振转速趋势,评估机床耗损情况,及时检修,减少经济损失。
机床设备管理解决方案.采集工业母机体检数据,抽取共振点的转速-振幅,通过工业大脑AICS对历史数据训练预测模型,预测机床运行中的异常设置和故障,适用于广泛的机械设备.谢赟辉,靖鑫,也树.机床设备管理解决方案.通过数控机床转速和主轴振幅数据的实时或定时采集,抽取共振点的转速-振幅,通过对历史数据训练预测模型,预测...
来自: 解决方案
< 1 2 3 4 >
共有4页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用