基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步
应用场景 在大数据场景，企业的Kafka实例可能存在多种情况，比如使用阿里云Kafka服务，可能是自建开源Kafka，或者是其他云上的云Kafka。不同的业务使用不同类型的Kafka实例，在这个前提下Kafka实例之间可能会需要消息同步的情况： 同帐号容灾场景：比如Kafka实例都是阿里云Kafka，但是Kafka实例会有主备之分，需要将主Kafka实例的消息实时同步到备Kafka。 跨帐号或异地容灾：这类场景比如主Kafka是阿里云Kafka，备Kafka是IDC开源自建Kafka，或者是其他云上的Kafka。 不同业务之间消息同步：因为现在的业务通常不会是信息孤岛，都需要消息互通，所以可能是A业务的Kafka实例消息需要同步到B业务的Kafka实例，并且这两个Kafka实例归属不同的RAM角色，有自己独自的权限控制。 解决问题 解决使用开源组件做消息同步的高成本问题。 解决使用开源组件做消息同步的并发性能、稳定性问题。 解决使用开源组件做消息同步的可靠性问题（重试机制，容错机制，死信队列等）。 大幅提升构建消息同步架构的效率，降低构建复杂度问题。
文档版本：20240330 40基于函数计算FC实现企业级权限精准控制Kafka跨实例消息同步 场景验证 target_kafka_endpoint：输入:9092 target_kafka_topic：输入topic-sync-a ECSIP可以在CADT架构图中，双击ECS图表，在下方资源清单中找到Private_ip。因为kafka-sync-func-ram-a函数负责从阿里云上的业务系统Kafka实例向模拟...
金融专属大数据workshop
实践目标 学习搭建一个实时数据仓库，掌握数据采集、存储、计算、输出、展示等整个业务流程。 整个实时数据仓库系统全部基于阿里云产品进行架构搭建，用户可以掌握并学会运用各个服务组件及各个组件之间如何联动。 理解阿里云原生实时离线一体数仓解决方案架构以及掌握交付落地的实践使用方法。 前置知识要求 熟练掌握SQL语法 对大数据体系系统知识有一定的了解
订单省份分布图 步骤1 首先删除原来的图表，添加饼图模块。文档版本：20210803（发布日期）69阿里云最佳实践金融大数据WorkShop 最佳实践项目实践 步骤2 修改主标题名称。步骤3 配置数据（order_id去重计数，order_status匹配为commit）后保存，单击更新可以 文档版本：20210803（发布日期）70阿里云最佳实践金融大数据...
来自：
最佳实践
相关产品：块存储,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,弹性公网IP,数据传输,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,实时计算,数据总线,Quick BI,Hologres
大数据workshop
大数据workshop
订单省份分布图 步骤1 首先删除原来的图表，添加饼图模块。文档版本：20210628（发布日期）75 阿里云最佳实践大数据 WorkShop 最佳实践项目实践 步骤2 修改主标题名称。步骤3 配置数据（order_id去重计数，order_status匹配为 commit）后保存，单击更新可 文档版本：20210628（发布日期）76 阿里云最佳实践大数据 WorkShop ...
来自：
最佳实践
相关产品：块存储,云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,弹性公网IP,数据传输,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,实时计算,数据总线,Quick BI,Hologres
应用实时监控服务ARMS
作为云原生可观测平台，应用实时监控服务 ARMS 包含前端监控、应用监控、云拨测等模块。覆盖浏览器、小程序、APP、分布式应用、容器等不同可观测环境与场景。帮助企业实现全栈性能监控与端到端追踪诊断。提高监控效率，压降运维工作量。
支持将所有的应用服务全部展示在拓扑图中，同时根据应用服务之间的调用关系进行串联，从而渲染出覆盖全部应用服务及其之间调用关系的全景拓扑。每个节点还支持快捷展示黄金指标.可视化展现应用关键指标、上下游依赖组件等关键信息，即时掌握应用总体健康情况.立体展示应用、服务、主机健康状况，应用上下游依赖关系。快速...
来自：
云产品
阿里云云原生可观测套件
阿里云云原生可观测套件围绕Prometheus服务、Grafana服务和链路追踪服务，通过标准的PromQL和SQL提供数据大盘展示、告警和数据探索能力。
全面公测｜可观测可视化 Grafana 版：一张图表胜过千行指标&日志.可观测实践｜如何利用 Prometheus 精细化观测云产品.可观测实践｜如何使用阿里云 Prometheus 观测 ECS 应用.Prometheus 监测 RocketMQ 最佳实践.问题盘点｜使用 Prometheus 监控 Kafka，我们该关注哪些指标.阿里云注册集群+Prometheus 解决多云容器集群运维...
来自：
云产品
基于Elasticsearch的订单检索加速最佳实践
随着企业信息化程度越来越高，核心业务数据存储在传统关系型数据库中不可避免地会遇到一个问题：单表记录不断增多，数据检索速度会变慢，尤其是对中文的模糊查询（建立普通索引完全不起作用）。虽然数据库自身在不断完善，但效果有限且没办法灵活扩展，复杂场景无法应对。 本方案基于阿里云Elasticsearch作为二级索引库，数据集成产品提供Binlog实时订阅，实时解析、增量数据实时更新及二级索引库之间进行数据实时同步，为数据库提供“能力增益”， 不仅能从根本解决主库抗压问题，提升稳定性；同时支持高效率、高性能、高弹性、低成本、多复杂场景的检索加速服务。
在上图 dms中使用 insert into语句插入一条数据到 trading_order表中：insert into trading_order(order_amount,source_type,consignee_ada,order_type,company,consignee_ada_pin_typ e,payment_status,order_bv,shipment_status,order_status,purchase_channel,login_ada,o rder_no,order_pv)VALUES(11056.64,35,"88abb40...
数据可视化DataV
数据可视化DataV是阿里云一款数据可视化应用搭建工具，旨让更多的人看到数据可视化的魅力，帮助非专业的工程师通过图形化的界面轻松搭建专业水准的可视化应用，满足您会议展览、业务监控、风险预警、地理信息分析等多种业务的展示需求。
智能的AI可视化助手，智能AI助手能够迅速学习和识别信息图表、大屏截图、手绘草图等图像内容，匹配生成对应可视化内容，降低大屏构建门槛；人人可用的低代码系统，提供低代码蓝图编辑器，让初级开发人员也能快速上手交互开发，不仅降低可视化应用的构建门槛，并且便于业务理解，降低项目交接和维护成本；DataV-数据看板.RDS...
来自：
云产品
MSE云原生网关解析body内容进行路由转发
MSE云原生网关中通过自定义插件transformer解析body内容，并用以路由转发规则判断
文档版本：20240426 5 MSE云原生网关解析 body内容进行路由转发 部署基础环境 部署过程大概需要 3分钟左右，完成部署后的应用架构图如下所示：（如果部署过程有异常，可以查看异常说明，如库存原因、地址冲突等，可以修改相 文档版本：20240426 6 MSE云原生网关解析 body内容进行路由转发 部署基础环境 应的规格配置后再次...
云解析DNS
云解析DNS（Domain Name System，简称 DNS）是一种快速、安全、稳定、智能的互联网域名解析服务。产品能力涵盖公网权威域名解析、全局流量管理、公网递归域名解析，帮助企业在互联网域名解析管理、域名自动容灾调度和移动APP/IoT终端域名防劫持方面提升用户体验和降低运维难度。
提供权威DNS域名解析服务，支持最高10条URL转发，TTL最低支持1秒，支持最高100条单域名、单线路的IP地址容量（负载均衡），支持主域名、子域名纬度的解析请求量数据统计.可根据访问者的地理位置，智能返回解析地址，支持联通、电信、移动、教育网、鹏博士、广电网6大运营商线路国内细分至31省份，支持海外线路6大洲细分至88...
来自：
云产品
异地双活场景下的数据双向同步
概述 随着客户业务规模的扩大，对系统高可用性要求越来越高，越来越多用户采用异地双活/多活架构，多活架构往往涉及业务侧做单元化改造，本方案仅模拟用户已做单元化改造后的数据双向同步，数据库采用双主架构，本地写本地读，同时又保证双库的数据一致性，为业务增加可用性和灵活性。 适用场景 数据库双向同步 数据库全局ID不冲突 双活架构的数据库建设问题 技术架构 本实践方案基于如下图所示的技术架构和主要流程编写操作步骤： 方案优势 DTS双向同步，采用独立模块避免数据同步占用系统资源。 奇偶ID涉及，避免数据冲突。 DTS多种处理冲突的方式供业务选择。 安全：原生的多租户系统，以项目进行隔离，所有计算任务在安全沙箱中运行。
适用场景◆数据库双向同步◆数据库全局 ID不冲突◆双活架构的数据库建设问题 技术架构 本实践方案基于如下图所示的技术架构和主要流程编写操作步骤：方案优势 DTS双向同步，采用独立模块避免数据同步占用系统资源。奇偶 ID涉及，避免数据冲突。文档版本：20220209 1 异地双活场景下的数据双向同步 最佳实践概述 DTS多种处理...
通过私网访问云服务
使用PrivateLink就可以通过私网访问其他VPC提供的服务，无需创建NAT网关或EIP等公网出口，更好的保障安全性和网络质量。支持同账号和跨账号的VPC间私网访问。另外 私网调用阿里云OpenAPI也有两种可选方案
如下图所示，公网访问的实现路径：云服 务暴露 Internet公网服务入口，用户通过 EIP出公网，走公共互联网访问目标服务。使用 PrivateLink实现 VPC私网访问有如下优点：流量不会离开阿里云私网，大大减少数据泄露可能性 同可用区转发，时延更低，抖动更小 支持访问带宽和安全组访问控制 无需担心地址冲突，简化网络管理 应用...
中小企业基于SAG APP实现云上移动办公
1. 客户端一键接入上云，配置自动化 2. 城域内 Internet 就近接入，快速高效 3. 数据加密传输，满足安全性要求 4. 阿里云控制台统一配置管理
4.阿里云控制台统一配置管理 产品列表 云企业网 CEN 智能接入网关 SAG APP 云服务器 ECS 云解析 PrivateZone 最佳实践频道 阿里云最佳实践生态群 云服务器 ECS（产品名称）文档模板（手册名称）/文档版本信息 阿里云 中小企业基于SAG APP 实现云上移动办公最佳实践 文档版本：20211008（发布日期）文档版本：20150122（发布...
云上高并发系统改造
场景描述 随着业务的发展，系统并发压力越来越大，如何 进行系统改造以满足高并发场景的业务需求成 为了一个技术难题。本实践抽象于客户的实际场 景，提供高并发下系统改造的理论指导和部分实 操演示。主要适用于以下场景： 1.系统并发压力大，需要进行系统应用改造。 2.数据层并发压力大，需进行分库分表改造。 3.数据库数据量巨大，亟待分库分表解决查询 和写入瓶颈的场景。 方案优势/解决问题 1.在水平扩展阶段，我们除了通过SLB做负载 均衡外，我们可以通过SLB下挂nginx的方 式，增加负载均衡侧的可扩展性 2.在数据库拆分阶段，在做好数据规划后，我 们借助DTS进行数据迁移，通过DRDS将 RDS MySQL的数据拆分到多个分库和分 表中。 产品列表 专用网络VPC 负载均衡SLB 云服务器ECS 数据库RDSMySQL 数据传输服务DTS PrivateZone 分布式关系型数据库DRDS
对于核心表有多维度查询需求，禁止直接不带人员编号查询：a)创建异构索引表，以空间换时间，如按照身份证编号查询，根据身份证编号 做异构索引 b)业务维护身份证编号与人员编号映射关系表，也存储在 DRDS c)利用下游的分析型查询数据库来解 7.多维度查询的另一种解法，比如申请单既要按照申请人员编号，又要按照申请单 编号...
- 产品推荐
- 这些文档可能帮助您