基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步
应用场景 在大数据场景，企业的Kafka实例可能存在多种情况，比如使用阿里云Kafka服务，可能是自建开源Kafka，或者是其他云上的云Kafka。不同的业务使用不同类型的Kafka实例，在这个前提下Kafka实例之间可能会需要消息同步的情况： 同帐号容灾场景：比如Kafka实例都是阿里云Kafka，但是Kafka实例会有主备之分，需要将主Kafka实例的消息实时同步到备Kafka。 跨帐号或异地容灾：这类场景比如主Kafka是阿里云Kafka，备Kafka是IDC开源自建Kafka，或者是其他云上的Kafka。 不同业务之间消息同步：因为现在的业务通常不会是信息孤岛，都需要消息互通，所以可能是A业务的Kafka实例消息需要同步到B业务的Kafka实例，并且这两个Kafka实例归属不同的RAM角色，有自己独自的权限控制。 解决问题 解决使用开源组件做消息同步的高成本问题。 解决使用开源组件做消息同步的并发性能、稳定性问题。 解决使用开源组件做消息同步的可靠性问题（重试机制，容错机制，死信队列等）。 大幅提升构建消息同步架构的效率，降低构建复杂度问题。
Initializer回调程序：index.initializer PreStop回调程序：index.destroy 步骤5 点击函数代码页签，删除 WebIDE 里的代码，打开 2.1 步骤中下载的 kafka-message-sync.py文件，复制内容，粘贴到WebIDE。文档版本：20240330 42基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步 场景验证 然后点击部署代码...
基于FC实现的Web端视频录制最佳实践
场景描述在很多互娱场景，在线教育领域会有直播视频录制的需求，但是往往一个页面上的内容是多种多样的，不止有直播流，可能还有白板，评论等其他元素，如果只是录直播流，那内容是不完整的，所以需要将整个屏幕的内容录制为视频。该最佳实践可以有效解决这个场景。
比如 record/test.mp4 ◼ frame_rate:录制视频的帧率(可选参数，默认帧率为 30fps)，数字格式 ◼ bit_rate:录制视频的码率(可选参数，默认码率为 1500k)，字符串格式 ◼ output_stream:推流地址(可选参数,eg:文档版本：20240325 12 基于 FC实现的 Web端视频录制最佳实践 场景验证 rtmp:/demo.aliyundoc.com/app/stream?xxxx...
MSE网关使用JWT进行认证鉴权
MSE网关中调用外部的认证鉴权服务，通过JWT的方式进行全局认证鉴权。 对网关有认证鉴权安全需求的场景，对于敏感的服务路由（可通过黑白名单方式配置）在网关层进行认证鉴权。
apiVersion:apps/v1 kind:Deployment metadata:labels:app:jwt-demo name:jwt-demo namespace:default spec:replicas:1 selector:matchLabels:app:jwt-demo template:metadata:labels:app:jwt-demo spec:containers:env:name:private_key value:>-LwiKz79Mpc2zOm7yEi5+dB15/DPGhDwCPsqO+i9cL8JeGbXDVF/eZrbn9W8hFsLiNoNLiQG...
基于MSE云原生网关同城多活
借助云原生微服务MSE网关，MSE配置注册中心的同城容灾多活微服务应用。构建一个经典的微服务场景，实现同城容灾的步骤，体现云原生相关产品在用户上云，高可用同城容灾多活场景下的能力。
文档版本：20240423 4 基于MSE云原生网关同城多活最佳实践 部署基础环境 步骤7 查看 ack-main和 ack-standby的 worker节点密码，可以根据需要进行调整，默认密 码请记录下来。文档版本：20240423 5 基于MSE云原生网关同城多活最佳实践 部署基础环境 步骤8 双击查看 NAT-GW及 EIP-SNAT配置 模版中的 NAT-GW和 EIP用于 ack-...
RAPIDS加速机器学习
场景描述 本方案适用于使用RAPIDS加速库+GPU 云服务器来对机器学习任务或者数据科学 任务进行加速的场景。相比CPU，利用 GPU+RAPIDS在某些场景下可以取得非常 明显的加速效果。 解决问题 1.搭建RAPIDS加速机器学习环境 2.使用容器服务Kubernetes版部署 RAPIDS环境 3.使用NAS存储计算数据 产品列表 容器服务Kubernetes版 GPU云服务器 文件存储NAS
本示例提供了一套基于 NVIDIA的 RAPIDS Demo代码及数据集修改的示例代 码，演示了在 GPU实例上使用 RAPIDS加速一个从 ETL到 ML Training端到 端任务的过程。其中，ETL时使用 RAPIDS的 cuDF，ML Training时使用 XGBoost。本文示例代码基于轻量级大数据框架 Dask运行，为一套单机运行的 代码。2 文档版本信息：20191209 ...
RAPIDS加速图像搜索
场景描述 本方案适用于使用RAPIDS加速平台 +GPU云服务器来对图像搜索任务进行加 速的场景。相比CPU，利用GPU+ RAPIDS在图像搜索场景下可以取得非常 明显的加速效果。 解决问题 1.搭建RAPIDS加速图像搜索环境 2.使用容器服务Kubernetes版部署图 像搜索环境 3.使用NAS存储计算数据 产品列表 容器服务Kubernetes版 GPU云服务器 文件存储NAS
JupyterLab application directory is/conda/envs/rapids/share/jupyter/lab[W 03:36:40.790 LabApp]JupyterLab server extension not enabled,manually loading.[I 03:36:40.791 LabApp]JupyterLab extension loaded from/conda/envs/rapids/lib/python3.6/site-packages/jupyterlab[I 03:36:40.791 LabApp]JupyterLab ...
企业办公安全访问一体化
本场景模拟企业办公环境，基于 CSAS 服务构 建企业办公安全一体化方案，将“安全 + 网络” 能力无缝融合，实现了对云下办公终端安全的统 一管理，企业无需在投资复杂且昂贵的传统硬件 安全设备，即可快速构建安全、可靠、低成本的 办公安全防护体系。 1. 企业办公环境访问互联网的安全管理 2. 企业办公环境访问内网服务的安全管理 3. 企业办公网络、安全一体化管理
复制以下地址到浏览器，下载本文相关代码、脚本等附件，下载后解压即可。https://code.aliyun.com/best-practice/196/repository/archive.zip?ref=master 附件中samplecode文件包含本篇实践中用到的命令行、配置文件、脚本等。 如有问题或建议，请扫钉钉二维码联系我们。文档版本：20210129 3企业办公安全一体化...
基于Elasticsearch的订单检索加速最佳实践
随着企业信息化程度越来越高，核心业务数据存储在传统关系型数据库中不可避免地会遇到一个问题：单表记录不断增多，数据检索速度会变慢，尤其是对中文的模糊查询（建立普通索引完全不起作用）。虽然数据库自身在不断完善，但效果有限且没办法灵活扩展，复杂场景无法应对。 本方案基于阿里云Elasticsearch作为二级索引库，数据集成产品提供Binlog实时订阅，实时解析、增量数据实时更新及二级索引库之间进行数据实时同步，为数据库提供“能力增益”， 不仅能从根本解决主库抗压问题，提升稳定性；同时支持高效率、高性能、高弹性、低成本、多复杂场景的检索加速服务。
OO/MM',order_no varchar(32)NOT NULL COMMENT '订单编号',login_ada varchar(16)NOT NULL COMMENT '办理人对于 foa用户，办理人、提 货人、实际购货人都是 foa，业绩参考人是 foa亲友对于 abo或者 pc,如 A代 B购货，办理人是 A,提货人、实际购货人、业绩参考人都是 B（店铺订单除外）',login_ada_type varchar(16)COMMENT ...
SpringCloud应用托管到ACK服务
场景描述 本实践适用于将SpringCloud应用托管到 ACK服务的场景中，创建容器服务ACK后， 利用Helm一键部署SpringCloud应用，将 SpringCloud应用托管到容器服务ACK。 解决问题 1.将SpringCloud应用托管到容器服务 ACK 产品列表 容器服务ACK 云服务器ECS
在进行下一个步骤之前，先删除之前部署的应用：1.#helm list 2.NAME NAMESPACE REVISION UPDATED STATUS CHART APP VERSION 3.piggymetrics default 1 2020-03-05 23:28:31.99822231+0800 CSTdeployed piggymetrics-0.0.1 4.#helm uninstall piggymetrics 5.release"piggymetrics"uninstalled 本文展示了将 PiggyMetrics ...
微服务引擎的线上流量治理
随着业务不断创新，微服务架构及数字化转型不断落地，在这个过程中，大量企业采用了开源的组件构建了微服务，比如有开源微服务全家桶之称的Spring Cloud体系或Apache Dubbo等，微服务的好处之一，在于快速迭代，如何在迭代过程中保障线上流量不受损？ 开源产品无运维工具，常常需要投入较大的运维人力和成本。 本实践将重点介绍如何快速集成主流开源微服务框架，实现业务零改造，解决开源框架在生产落地过程中的痛点，例如无损上下线、标签路由等，并通过托管微服务开源组件（API网关、注册中心、配置中心等）的服务，提供白屏化监控告警、容灾、宕机重启、扩缩容等能力，帮助企业释放业务无关的运维成本，聚焦业务本身的运维和发展。 方案优势 快速集成：通过JavaAgent技术实现Sping Cloud和Dubbo框架可以实现业务零改造接入。 免运维：托管微服务依赖开源中间件的服务，提供白屏化监控告警、容灾、宕机重启、扩缩容等能力，帮助我们客户释放业务无关的运维成本，聚焦自身业务本身的运维和发展。 开源增强：提供开源框架在生产落地过程中的痛点，例如应用无损上下线/金丝雀发布/南北+东西流量打通等，帮助客户的业务提高自身SLA和降低自研成本。
步骤4 在无状态（Deployment）页面右上角单击使用 YAML创建资源，基于 productservice 的 deployment配置进行简单修改即可，如下：apiVersion:apps/v1 kind:Deployment metadata:name:productservice1 spec:selector:matchLabels:app:productservice1 template:metadata:annotations:armsPilotAutoEnable:"on...
基于MaxCompute的大数据BI分析
场景描述 本文以电商行业为例，将业务数据和日志数据使用 MaxCompute做ETL之后，同步到ADB进行实时 分析，之后通过QuickBI进行快速可视化展示。 解决问题 1.互联网行业、电商、游戏行业等网站、App、 小程序应用内BI分析场景。 2.可扩展到各类网站BI分析场景使用。 产品列表 1.MaxCompute 2.分析型数据MySQL版 3.日志服务SLS 4.QuickBI 5.云服务器ECS 6.RDSMySQL版
互联网行业、电商、游戏行业等网站、App、小程 序应用内 BI分析场景。2.可扩展到各类网站 BI分析场景使用。产品列表 1.MaxCompute 2.实时数仓 Hologres 如有问题请使用钉钉扫码联系文档作者：3.日志服务 SLS 4.Quick BI 5.云服务器 ECS 6.RDS MySQL版 最佳实践频道 阿里云最佳实践技术分享群 云服务器 ECS（产品名称）文档...
金融专属大数据workshop
实践目标 学习搭建一个实时数据仓库，掌握数据采集、存储、计算、输出、展示等整个业务流程。 整个实时数据仓库系统全部基于阿里云产品进行架构搭建，用户可以掌握并学会运用各个服务组件及各个组件之间如何联动。 理解阿里云原生实时离线一体数仓解决方案架构以及掌握交付落地的实践使用方法。 前置知识要求 熟练掌握SQL语法 对大数据体系系统知识有一定的了解
对结果进行可视化展示 例如用户通过手机APP购买基金，金融公司可以通过后台的大数据分析平台达到如下的 大屏分析效果：文档版本：20210803（发布日期）4阿里云最佳实践大数据WorkShop 最佳实践方案设计 文档版本：20210803（发布日期）5阿里云最佳实践大数据WorkShop 最佳实践方案设计 2.2.2.项目架构 2.2.2.1.阿里云技术...
来自：
最佳实践
相关产品：块存储,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,弹性公网IP,数据传输,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,实时计算,数据总线,Quick BI,Hologres
微服务应用问题定位及故障演练
场景描述 用户微服务架构应用基于阿里云 ACK 部署， 通 过 ARMS 监控发现微服务应用的容错能力是否 健壮， 容器编排配置是否合理， 以及节点故障引 发的问题等， 方案通过 AHAS 故障注入模拟生 产环境产生的故障， 通过 ARMS 及时发现问题、 定位问题， 并结合 ARMS 的告警功能快速发现 并解决问题。 发现调用下游一个服务实例出现异常。 发现业务 Pod 故障， 验证业务的稳定性。 发现调用数据库延迟故障， 验证 Pod 的水 平扩容能力。 解决问题 1. 定位并解决微服务应用的容错能力。 2. 定位并解决微服务应用编排合理性。 3. 发现故障并验证系统故障的告警时效性。 产品列表 应用高可用服务 AHAS 性能测试 PTS 应用实时监控服务 ARMS 容器服务 kubernetes 版 负载均衡 SLB 专有网络 VPC 日志服务 SLS
文档版本：20220331 64 微服务应用问题定位及故障演练 问题定位及故障模拟 步骤23 新建一个 HPA的 yaml文件，参考如下：apiVersion:autoscaling/v2beta2 kind:HorizontalPodAutoscaler metadata:name:ahas-sentinel-hpa spec:scaleTargetRef:apiVersion:apps/v1beta2 kind:Deployment name:notification-service ...
混合云自有K8S弹性使用ECI
场景描述 本文介绍线下IDC与云端通过专线构建混合云架构，自有K8S利用虚拟节点弹性调用ECI承载业务高峰期资源需求的最佳实践。 解决问题 混合云环境下，自有K8S集群注册至ACK，实现云端纳管。纳管K8S集群部署Virtual Node，使集群具备ECI资源调度能力。在以上环境中部署Web及离线作业应用，并使用ECI资源作为弹性资源池满足业务波峰需求。 产品列表 云服务器ECS 云架构设计工具CADT 专有网络VPC 访问控制RAM 云企业网CEN 弹性容器实例ECI Nat网关NAT 容器镜像服务ACR 负载均衡SLB 容器服务Kubernetes版ACK 弹性公网IPEIP
步骤4 在应用目录的 App Hub中搜索 wordpress，选择 wordpress 5.3.0 stable版本。文档版本：20210520 46 混合云 IDC自有 K8S弹性使用 ECI ECI使用示例 步骤5 在参数标签页修改应用配置。1.配置外部 MySQL信息，根据 6.3.1.4章节的信息配置相应参数。注意：wp_dbuser的密码请以实际密码替换。文档版本：20210520 47 混合云 ...
电商网站业务安全
场景描述 业务运营活动是电商行业开展业务必不可少的 手段，但大流量带来的系统可用性、优惠券带来 的“薅羊毛”等问题屡见不鲜，都会影响到运营 效果、甚至出现负面影响。阿里云基于集团电商 业务多年的运营经验，为云上客户提供完整的电 商网站运营期间的防护方案。 解决问题 1.保障业务运维活动系统稳定运行 2.防止“薅羊毛” 3.运营优惠给到真实的客户 产品列表 爬虫风险管理 风险识别 DDoS防护包
同时，在定制场景化防爬规则后，您可以在测试环境 中对防爬规则进行应用前的验证，避免因规则配置不合理或防护兼容性问题，对您的网站或 App业务产生误拦截或防护效果低等不利影响。参考：https://help.aliyun.com/document_detail/196126.html 步骤1 找到场景化配置，并点击点我开始。步骤2 在防护场景定义中，参考下图中...
混合云使用Ali-Perseus
场景描述 本文介绍了混合云场景中，自建 Kubernetes服务，线下集群+云上弹性扩 展阿里云GPU服务实例+飞天AI加速工 具，并采用阿里云CPFS存储，运行AI训 练+AI推理作业的操作步骤。 解决问题 1.利用云企业网打通两个地域的VPC， 自建Kubernetes集群 2.使用飞天AI加速工具运行训练和推理 作业 3.使用CPFS存储共享数据 产品列表 云企业网CEN GPU云服务器 并行文件存储CPFS 文件存储NAS
混合云使用飞天 AI加速工具 最佳...[root@master001 099]#cat deploy-client.yaml apiVersion:extensions/v1beta1 kind:Deployment metadata:name:perseus-client namespace:default spec:replicas:1 template:metadata:labels:app:perseus-client name:perseus-client spec:containers:name:perseus-client image:registry....
- 产品推荐
- 这些文档可能帮助您