SLS数据入湖Kafka最佳实践
SLS数据入湖Kafka最佳实践
应用和数据分散在多云或混合云,在面对多云/混合云这样大的趋势下,数据无法进行统一的聚合、分析处理和导出等,本方案给出了在多云/混合云场景下,构建通过标准的Kafka协议和托管服务,SLS可以连接Kafka数据入湖导入,然后进行统一的海量数据的集中存储、智能转储、聚合分析查询等。
或者通过控制台Link访问(https://kafka.console.aliyun.com/region/cn-shanghai/instances)在 kafka-serverless实例详情-》接入点信息下,有公网接入点,鼠标放在右边域名 接入点,单击出现的复制图标:文档版本:20240428 24SLS数据入湖Kafka最佳实践 场景验证 回到Kafka-数据导入窗口,在*服务地址中,粘贴 步骤7回到...
来自: 最佳实践 相关产品:云服务器ECS,日志服务(SLS),Serverless 应用引擎,消息队列 Kafka 版
基于函数计算FC实现物联网音视频处理
基于函数计算FC实现物联网音视频处理
在物联网场景中,智能设备会产生大量的非结构化数据,并且采集量和频率都很高。比如各类摄像头(家用摄像头、车载摄像头、工业监控摄像头等)采集的数据。企业需要对这些非结构化数据做快速的分析和处理,然后应用到下游业务中,所以需要一套高并发、低成本、自动化的方案。该最佳实践就适用于这类场景。
步骤5 双击为FC-SERVICE-APP的函数计算服务,查看配置信息。服务是函数计算的资源管理单位。创建函数前必须先创建服务,服务就像函数的集合,同一个服务下的所有函数共享一些相同的设置,例如服务授权和日志配置等。文档版本:20240502 6基于函数计算FC实现物联网音视频处理最佳实践 场景验证  服务名称:根据实际业务...
来自: 最佳实践 | 相关产品:对象存储 OSS,函数计算
基于MSE云原生网关实现全链路灰度
基于MSE云原生网关实现全链路灰度
在微服务场景中,应用间的调用是随机的。当您部署的Spring Cloud应用或Dubbo应用存在升级版本时,可能会导致无法将具有一定特征的流量路由到应用的目标版本。通过MSE提供的全链路灰度能力,您无需修改业务代码,就可以实现端到端的全链路流量控制。泳道可以将应用的相关版本隔离成一个独立的运行环境。通过设置泳道规则,可以将满足规则的请求流量路由到目标版本的应用。
应用A的基线版本 apiVersion:apps/v1 kind:Deployment metadata:name:spring-cloud-a namespace:mse-gray-demo spec:selector:matchLabels:app:spring-cloud-a template:metadata:labels:文档版本:20240429 18基于MSE云原生网关实现全链路灰度最佳实践 app:spring-cloud-a msePilotCreateAppName:spring-cloud-a ...
来自: 最佳实践 | 相关产品:弹性公网IP,容器服务 ACK,NAT网关,微服务引擎
基于SAE的一站式Web服务托管方案
基于SAE的一站式Web服务托管方案
通过SAE提供的内置CICD能力,代码提交后可以触发自动构建,并部署应用到SAE,部署完成后,应用自动产生访问域名,外部请求通过域名可以直接访问应用。SAE提供了内置的可观测,灰度,回滚能力,通过控制台可以白屏化完成整个操作。SAE适合应用容器化快速上云,客户只需要提供代码仓库,后续的CICD,应用访问,弹性管理,运维监控,SAE都提供了内置的集成能力
应用场景 通过 SAE提供的内置 CICD能力,代码提交后可 以触发自动构建,并部署应用到 SAE,部署完成 后,应用自动产生访问域名,外部请求通过域名 可以直接访问应用。SAE提供了内置的可观测,灰度,回滚能力,通 过控制台可以白屏化完成整个操作。SAE适合应用容器化快速上云,客户只需要提供 代码仓库,后续的 CICD,应用...
来自: 最佳实践 | 相关产品:Serverless 应用引擎
高效防护 Web 应用
随着网络技术的不断发展,您的Web应用如果没有流量入口的防护,会面临诸多风险。本方案以ECS实例接入WAF为例,推荐您使用Web应用防火墙(WAF)开启应用防护,避免网站服务器被恶意入侵导致性能异常等问题,保障网站的业务安全和数据安全。同时,为您节约开发成本,满足行业合规要求。
背景Web应用(网站、APP、API、H5、小程序等)支撑超过90%的线上业务,这些应用在对外提供服务的同时,也成为了攻击者进入内部服务器或数据库的通道。Web应用面临的常见威胁包括通过各类Web漏洞侵入服务器、上传木马、篡改网页内容、非法爬取数据、垃圾账号注册、恶意下单等。根据相关网络安全合规要求,网络服务提供者必须...
来自: 解决方案
基于MSE云原生网关同城多活
基于MSE云原生网关同城多活
借助云原生微服务MSE网关,MSE配置注册中心的同城容灾多活微服务应用。构建一个经典的微服务场景,实现同城容灾的步骤,体现云原生相关产品在用户上云,高可用同城容灾多活场景下的能力。
J区 ack-main应用 J-YAML文件,红色链接地址替换为章节 3.2步骤 1 中 J区 MSE 注册中心地址 apiVersion:apps/v1 kind:Deployment metadata:name:duohuo-provider labels:app:duohuo-provider spec:replicas:2 selector:matchLabels:app:duohuo-provider template:metadata:labels:app:duohuo-provider spec:containers:env:...
来自: 最佳实践 | 相关产品:弹性公网IP,容器服务 ACK,NAT网关,微服务引擎
基于SpringCloud应用玩转MSE实践
基于SpringCloud应用玩转MSE实践
随着业务不断创新,大型的单个应用和服务会被拆分为数个甚至数十个微服务,微服务架构已经被广泛应用。 微服务的好处在于快速迭代,如何在迭代过程中保障线上流量不受损。依赖开源产品缺少无运维工具,常常需要投入较大的运维人力和成本。 本实践提供基于云原生应用产品提供微服务注册配置中心、微服务治理和云原生网关等一系列高性能和高可用的企业级云服务能力。
app:mseconsumer template: metadata: labels:app:mseconsumer spec: containers: -env: -name:nacos_address#注册中心的endpoint value:'mse-fd0fc*-nacos-ans.mse.aliyuncs.com:8848' -name:gray_env #环境标识,基线环境传base,灰度环境传gray value:base-name:mq_address#rocketMq的endpoint value:'rmq-cn-x0r3bu0y*-vpc....
来自: 最佳实践 | 相关产品:弹性公网IP,容器服务 ACK,日志服务(SLS),NAT网关,微服务引擎,消息队列 RocketMQ 版,云速搭
中小企业基于SAG APP实现云上移动办公
中小企业基于SAG <em>APP</em>实现云上移动办公
1. 客户端一键接入上云,配置自动化 2. 城域内 Internet 就近接入,快速高效 3. 数据加密传输,满足安全性要求 4. 阿里云控制台统一配置管理
可以在自定义的一个或多个专有网络中快速构建 DNS 系 统,实 现 私 有 映 射 到 IP 资源地址。详见:https://www.aliyun.com/product/pvtz 文档版本:20211008 III 中小企业基于 SAG APP实现云上移动办公最佳实践 目录 目录 文档版本信息.I 法律声明.II 名词解释.III 目录.1 最佳实践概述.2 前置条件.3 1.环境构建.4 ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,云企业网,云解析 PrivateZone,智能接入网关,云速搭
新版产品集合页
基于丰富的产品,将计算、存储、网络、数据库、大数据、人工智能等最新产品技术与场景深度融合,为开发者打造稳定可靠的云基础设施以及云原生的开发环境。
云消息队列 MQTT 版专为移动互联网、物联网领域设计的消息产品,覆盖互动直播、金融支付、智能餐饮、即时聊天、移动 Apps 等多种应用场景。消息服务 MNS帮助应用开发者在他们应用的分布式组件上自由的传递数据、通知消息,构建松耦合系统。应用集成API 网关提供 API 托管服务,覆盖设计、开发、测试、发布、售卖、运维监测...
来自: 云产品
RAM用户集成企业AD FS身份认证
RAM用户集成企业AD FS身份认证
介绍阿里云RAM集成Windows AD FS,使用企 业AD对员工的身份认证及管理功能,配置RAM 用户与AD用户的映射关系,实现企业员工使用企 业AD域账号以单点登录(SSO)的方式访问阿里 云控制台。 解决问题 1.Windows AD域部署。 2.Windows AD证书服务及Web服务部署。 3.Windows AD FS部署。 4.阿里云用户SSO配置。 5.AD FS集成RAM用户SSO。 产品列表 l访问控制RAM l专有网络VPC l云服务器ECS
文档版本:20200120 86RAM用户集成企业ADFS身份认证 附录一 文档版本:20200120 87RAM用户集成企业ADFS身份认证 附录二 附录二 使用别名实现RAM 用户与AD 用户映射的配置方法 当AD 域名是一个在公网 DNS中注册域名,则可以将AD域名设置为 RAM的 别名。ADFS中无需设置域名转换,直接映射用户即可,具体操作如下:步骤1...
来自: 最佳实践 | 相关产品:块存储,专有网络 VPC,云服务器ECS,弹性公网IP,访问控制,云速搭CADT
企业初创场景解决方案
企业初创场景解决方案云企业服务类别众多,品质优良,可覆盖企业各类需求,具备全网优势。方案针对初创企业构建了清晰的细分场景及产品推荐,帮助客户快速定位解决需求。从初创开始,企业有需求,就找阿里云!
域名服务和商标注册服务全国领先,APP 软著支持无纸化全在线办理等等.价值突出:好口碑,奠定行业影响.整合售前、售中、售后服务能力,提供全面、专业、贴心的服务保障.品质保障:好体验,贯穿每个细节.LOGO设计.智能记账工具.云上公司注册.商标驳回复审.专利智能管家.根据您提交的需求,将有售前专家免费服务!根据您提交...
来自: 解决方案
数据湖-在线学习场景数据分析
数据湖-在线学习场景数据分析
场景描述 本场景以在线教育中一个答题闯关类的应用为 例,使用WebServer来模拟演示这类日志数据 的分析处理。通过Nginx和Pythonflask搭建 WebServer,模拟应用中的关键页面,比如登 录、课程内容等,之后构造若干用户使用的模拟 日志数据,投递到数据湖进行分析后获取应用 PV、UV、课程内容访问排行、平均得分等等。 解决问题 基于数据湖(EMR+OSS)搭建大数据平台。 EMR和OSS使用和配置。 数据统一存储到OSS。 产品列表 E-MapReduce 对象存储OSS 云服务器ECS 访问控制RAM 专有网络VPC
文档版本:20200331 63数据湖-在线学习场景数据分析 附录-TCP DS oss在emr里的引用路径格式,oss:/Bucket域名/路径 注意:创建EMR时,默认使用的权限角色为AliyunEMRECSRolePolicy,包含了对 OSS的权限,实际生产环境中创建EMR时请根据需要使用自定义角色。步骤2 生成测试数据和查询SQL,执行命令:hive dropdatabasetpcds_...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,访问控制,E-MapReduce
互联网电商行业离线大数据分析
互联网电商行业离线大数据分析
电商网站销售数据通过大数据分析后将业务指标数据在大屏幕上展示,如销售指标、客户指标、销售排名、订单地区分布等。大屏上销售数据可视化动态展示,效果震撼,触控大屏支持用户自助查询数据,极大地增强数据的可读性。
returnTotalNum=true&pageSize=10&pageNum=1步骤2 在DataV的工作空间>数据源中,添加API网关数据,配置相关参数,具体配置参 考下图:域名:参考上一步骤记录的域名 Appkey和AppSecret:参考2.6步骤14记录的信息 步骤3 配置完成,单击确定。3.3.配置离线数据大屏展示 配置数字翻盘器 步骤1 在大屏应用编辑器页面,单击数字...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,API网关,云速搭CADT
资源管理
资源管理
场景描述 随着企业IT成熟度不断提高、管理的云上资源 不断增多,如何对资源进行高效管理的问题就会 凸显出来。阿里云的资源管理服务支持您按照业 务需要搭建适合的资源组织关系,使用目录、资 源夹、账号、资源组分层次组织与管理您的全部 资源,更好的实现项目成功。 解决问题 1.按照企业组织结构管理账号体系。 2.指定结算账号进行统一结算 3.统一管理成员账号权限系统 4.账号下的资源按照资源组进行分类 5.可以按照自定义财务单元进行分账管理 产品列表 资源管理
注意:在资源组范围内的授权只作用于资源组内,比如 app-1RAM用户被授权应用 1 组的 AdministratorAccess权限只针对资源 1组内的资源有效,app-1RAM用户无 权访问应用 1组之外的其他资源。步骤9 单击资源组应用 2 组的管理权限,新增授权,选择 RAM 用户 app-2,并赋予 AdministratorAccess权限。操作同步骤 8。步骤10 登录...
来自: 最佳实践 | 相关产品:资源管理
利用交互式分析(Hologres)进行数据查询
利用交互式分析(Hologres)进行数据查询
场景描述:随着收集数据的方式不断丰富,企业信息化 程度越来越高,企业掌握的数据量呈TB、 PB或EB级别增长。同时,数据中台的快 速推进,使数据应用主要为数据支撑、用户 画像、实时圈人及广告精准投放等核心业务 服务。高可靠和低延时地数据服务成为企业 数字化转型的关键。 Hologres致力于低成本和高性能地大规模 计算型存储和强大的查询能力,为您提供海 量数据的实时数据仓库解决方案和实时交 互式查询服务。 解决问题 1.加速查询MaxCompute数据 2.快速搭建实时数据仓库 3.无缝对接主流BI工具 产品列表 MaxCompute Hologres 实时计算Flink 专有网络VPC DataWorks DataV
'$.site_channelid')assite_channelid,get_json_object(message,'$.ad_type')asad_type,get_json_object(message,'$.app_id')asapp_id,get_json_object(message,'$.app_name1')asapp_name1,get_json_object(message,'$.app_name')asapp_name,get_json_object(message,'$.app_ver')asapp_ver,get_json_object(message,'$.tag...
来自: 最佳实践 | 相关产品:大数据计算服务 MaxCompute,DataV数据可视化,实时计算,Hologres,云速搭CADT
Exchange Server云上部署最佳实践
Exchange Server云上部署最佳实践
阿里云提供基础设施服务,能够以高可用、高容错且经济实惠的方式将Exchange Server部署在云上。通过在 阿里云上部署,可以获得Exchange Server的功能以及阿里云天然灵活性和安全性。
文档版本:20220119 15 Exchange Server云上部署最佳实践 部署控制器和 DNS 文档版本:20220119 16 Exchange Server云上部署最佳实践 部署控制器和 DNS 文档版本:20220119 17 Exchange Server云上部署最佳实践 部署控制器和 DNS 文档版本:20220119 18 Exchange Server云上部署最佳实践 部署控制器和 DNS 步骤5 ...
来自: 最佳实践 | 相关产品:云服务器ECS,负载均衡 SLB,弹性公网IP,NAT网关,SSL证书,云速搭CADT
微服务应用问题定位及故障演练
微服务应用问题定位及故障演练
场景描述 用户微服务架构应用基于阿里云 ACK 部署, 通 过 ARMS 监控发现微服务应用的容错能力是否 健壮, 容器编排配置是否合理, 以及节点故障引 发的问题等, 方案通过 AHAS 故障注入模拟生 产环境产生的故障, 通过 ARMS 及时发现问题、 定位问题, 并结合 ARMS 的告警功能快速发现 并解决问题。  发现调用下游一个服务实例出现异常。  发现业务 Pod 故障, 验证业务的稳定性。  发现调用数据库延迟故障, 验证 Pod 的水 平扩容能力。 解决问题 1. 定位并解决微服务应用的容错能力。 2. 定位并解决微服务应用编排合理性。 3. 发现故障并验证系统故障的告警时效性。 产品列表  应用高可用服务 AHAS  性能测试 PTS  应用实时监控服务 ARMS  容器服务 kubernetes 版  负载均衡 SLB  专有网络 VPC  日志服务 SLS
方案架构 Springcloud应用部署在 ACK上通过 ARMS进行问题定位,通过 AHAS故障演练 入故障模拟生成环境各种故障,通过 PTS模拟业务流量,详细架构如下:文档版本:20220331 1 微服务应用问题定位及故障演练 最佳实践概述 说明:1.SpringCloud微服务架构应用部署在阿里云的 ACK上,配合 ACR实现应用更新 部署。2.后端数据...
来自: 最佳实践 | 相关产品:容器服务 ACK,日志服务(SLS),性能测试 PTS,应用实时监控服务 ARMS ,应用高可用服务 AHAS,云速搭
企业上云数据安全
企业上云数据安全
场景描述 企业是否选择上公共云,或者哪些系统或数据上 公共云,对数据安全的关心是重要因素之一。本 最佳实践重点在于介绍狭义的数据加密存储安 全范畴,即首先使用SDDP产品进行敏感数据发 现和分级分类,然后对高级别敏感数据进行按 需、不同类型的全链路加密存储。 解决问题 1.帮助客户发现敏感数据 2.对敏感数据进行分类、分级 3.对不同级别的数据如何选择加密方式 4.具体如何进行加密 产品列表 敏感数据识别SDDP 密钥管理服务KMS 云数据库RDS 对象存储OSS
客户端加密方式,适用于在大量数据需要保存到 OSS相同 bucket下,其中一小部分 需要加密保存,其他大部分不需要加密保存,例如信息流 APP用户访问或服务运行日 志,在 OSS长期保存,其中少量特别敏感日志,通过客户端加密后传输到 OSS。客户端加密的具体流程如下图:本最佳实践中,服务端加密使用 OSS托管方式,即 SSE-OSS...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,密钥管理服务,敏感数据保护,云速搭CADT
移动推送
阿里云移动推送(AliCloud Mobile Push)是提供给移动开发者的移动端消息推送服务,通过在App中集成推送功能,进行高效的App精准推送、实时的App消息推送,从而使业务及时触达用户,提高用户粘性。
统计您应用下累计注册的设备数和新注册的设备数.提供当前用户阿里云账号下所有应用使用过程中产生的日志,以便于您基于日志进行个性化查询和分析.具有推送数据统计与设备数据统计功能.向用户精准推送针对性消息,包括活动通知、信息咨询、产品推荐、系统提示等,提升用户活跃度与粘性.提供设备ID、用户账户、标签、别名、...
来自: 云产品
阿里云DNS
阿里云DNS覆盖了公网权威域名解析、内网域名解析、移动解析以及专有云的域名解析场景。为广大用户提供稳定、安全、快速、智能的域名解析服务,助力网站快速实现域名迁移及网站搭建,企业上云就来阿里云。
提供企业域名转发操作,实现灵活组网和并网操作,支持全局域名和按域名转发.提供基于VPC的PrivateZone管理和解析功能,满足专有云DNS按租户对DNS数据和解析隔离的需求.在开通对外访问公网的情况下,专有云DNS支持公网域名递归解析功能.管控系统集成在专有云统一管控平台中,统一账号统一管理;支持通过OpenAPI进行操作...
来自: 云产品
< 1 2 3 >
共有3页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用