实时计算Flink版
实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,具备实时应用的作业开发、数据调试、运行与监控、自动调优、智能诊断等全生命周期能力。内核引擎100%兼容Apache Flink,2倍性能提升,拥有FlinkCDC、动态CEP等企业级增值功能,内置丰富上下游连接器,助力企业构建高效、稳定和强大的实时数据应用。
通过实时计算Flink版进行实时内容热点分析,实时用户行为分析,用户增长和活跃度实时监控分析,文章视频实时推荐,实时广告投放,实时流量运营等.互联网娱乐类企业.通过使用阿里云实时计算Flink版,可以有效解决续报、复课、直播课视频质量监控等在线教育关键场景下面临的计算实时性/准确性问题。通过产品提供的完整流式SQL...
来自: 云产品
利用交互式分析(Hologres)进行数据查询
利用交互式分析(Hologres)进行数据查询
场景描述:随着收集数据的方式不断丰富,企业信息化 程度越来越高,企业掌握的数据量呈TB、 PB或EB级别增长。同时,数据中台的快 速推进,使数据应用主要为数据支撑、用户 画像、实时圈人及广告精准投放等核心业务 服务。高可靠和低延时地数据服务成为企业 数字化转型的关键。 Hologres致力于低成本和高性能地大规模 计算型存储和强大的查询能力,为您提供海 量数据的实时数据仓库解决方案和实时交 互式查询服务。 解决问题 1.加速查询MaxCompute数据 2.快速搭建实时数据仓库 3.无缝对接主流BI工具 产品列表 MaxCompute Hologres 实时计算Flink 专有网络VPC DataWorks DataV
(https://workbench.data.aliyun.com/console#/MCEngines)步骤2 查看绑定dataworks后的项目空间项目类型managed、默认后付费Quota 2.6.2.为工作空间添加成员和角色 步骤1 登录DataWorks控制台步骤2 在左侧导航栏,单击工作空间列表。单击相应工作空间后的管理。快速进入空间成员 步骤3 在左侧导航栏,单击成员管理。在...
来自: 最佳实践 | 相关产品:大数据计算服务 MaxCompute,DataV数据可视化,实时计算,Hologres,云速搭CADT
MaxCompute湖仓一体方案
MaxCompute湖仓一体方案
场景描述 自建数据湖与云数仓的融合解决方案,将 MaxCompute与自建的Hive集群做数据打 通,通过存储共享,元数据镜像等方式,解 决传统模式下的存储冗余,计算资源弹性能 力弱的痛点。可大幅度增强系统的资源弹 性,解决业务高峰期计算资源不足的问题。 方案优势 1.业务无侵入性:现有业务无需改造。 2.性能优化:MaxCompute在SQL上做 了大量优化与能力沉淀,可提高SQL 运行性能,降低计算成本。 3.灵活管理:元数据实时同步,无需额外 管理数据同步任务。 4.资源弹性:利用MaxCompute计算池 弹性进行海量数据计算。 解决问题 1.增强业务高峰期的资源弹性。 2.优化自建数据湖的数据治理能力。 3.减少跨平台数据处理的存储冗余。 产品列表 专有网络VPC 云服务器ECS 访问控制RAM 运维编排OOS MaxCompute(原ODPS) 云企业网CEN
project_name=hybrid4dla_0402 access_id=access_key=end_point=http://service.cn-shanghai.maxcompute.aliyun.com/api 步骤3 配置完成后,执行命令 odpscmd,验证是否可以正常进入项目空间。文档版本:20220402 12 MaxCompute湖仓一体方案 云数仓 MaxCompute 2.3.Maxcompute 与 VPC专有网络打通 步骤1 授权 MaxCompute在 ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云企业网,E-MapReduce,大数据计算服务 MaxCompute,运维编排,云速搭
基于湖仓一体架构使用MaxCompute对OSS湖数据分析预测
基于湖仓一体架构使用MaxCompute对OSS湖数据分析预测
本篇最佳实践先创建EMR集群作为数据湖对象,Hive元数据存储在DLF,外表数据存储在OSS。然后使用阿里云数据仓库MaxCompute以创建外部项目的方式与存储在DLF的元数据库映射打通,实现元数据统一。最后通过一个毒蘑菇的训练和预测demo,演示云数仓MaxCompute如何对于存储在EMR数据湖的数据进行加工处理以达到业务预期。
基于湖仓一体架构使用MaxCompute对OSS湖数据分析预测 步骤3 点击数据源,可以看到已经自动关联了MaxCompute数据源:项目空间为dlf_mc001 2.1章节已经创建的MaxCompute的项目空间。2.4.DLF授权MaxCompute访问 步骤1 此方案的DLF和MaxCompute属于同一个阿里云账号,所以可以通过一键授权完成 ...
来自: 最佳实践 | 相关产品:对象存储 OSS,E-MapReduce,DataWorks,大数据计算服务 MaxCompute,API网关,数据湖构建,云速搭
智能商业分析 Quick BI
瓴羊智能商业分析 Quick BI 是阿里云用户臻选的数据可视化工具,大幅提升数据分析和报表开发效率,一站式满足企业各种场景的数据分析和决策的诉求。
在具体的操作过程中,您需要先确保已开通 MaxCompute 和 Quick BI,并将它们绑定至 DataWorks 项目空间。然后,在 MaxCompute 中准备好数据源,这些数据可以是新建的表或者已经存在于数据地图中的表。之后,就可以在 HoloStudio 中直接查询或导入查询 MaxCompute 的数据。2023-11-05Quick BI 怎么根据某个维度字段生成相同...
来自: 云产品
基于MaxCompute的大数据BI分析
基于MaxCompute的大数据BI分析
场景描述 本文以电商行业为例,将业务数据和日志数据使用 MaxCompute做ETL之后,同步到ADB进行实时 分析,之后通过QuickBI进行快速可视化展示。 解决问题 1.互联网行业、电商、游戏行业等网站、App、 小程序应用内BI分析场景。 2.可扩展到各类网站BI分析场景使用。 产品列表 1.MaxCompute 2.分析型数据MySQL版 3.日志服务SLS 4.QuickBI 5.云服务器ECS 6.RDSMySQL版
文档版本:20211213 76 基于 MaxCompute的大数据 BI分析 DataWorks大数据处理 步骤7 连接 MC项目空间,以 MacOS为例,如图打开 projcet explorer 文档版本:20211213 77 基于 MaxCompute的大数据 BI分析 DataWorks大数据处理 参数说明:project_name=my_project#指定用户想进入的项目空间名称。access_id/access_key#...
来自: 最佳实践 | 相关产品:日志服务(SLS),大数据计算服务 MaxCompute,云原生数据仓库AnalyticDB My,Quick BI,云速搭CADT
基于MSE云原生网关实现全链路灰度
基于MSE云原生网关实现全链路灰度
在微服务场景中,应用间的调用是随机的。当您部署的Spring Cloud应用或Dubbo应用存在升级版本时,可能会导致无法将具有一定特征的流量路由到应用的目标版本。通过MSE提供的全链路灰度能力,您无需修改业务代码,就可以实现端到端的全链路流量控制。泳道可以将应用的相关版本隔离成一个独立的运行环境。通过设置泳道规则,可以将满足规则的请求流量路由到目标版本的应用。
【基于MSE云原生网关实现全链路灰度】最佳实践 场景描述 在微服务场景中,应用的调用是随机的。当您部署 的SpringCloud应用或Dubbo应用存在升级版本 业务架构 时,可能会导致无法将具有一定特征的流量路由到应 用的目标版本。通过MSE提供的全链路灰度能力,您无需修改业务代码,就可以实现端到端的全链路流 量控制。泳道...
来自: 最佳实践 | 相关产品:弹性公网IP,容器服务 ACK,NAT网关,微服务引擎
容器场景下的应用性能监控、调用链拓扑、内存剖析
容器场景下的应用性能监控、调用链拓扑、内存剖析
场景描述 随着云原生及微服务技术的普及,越来越多的系统已经通过云原生和微服务技术实现企业的降本增效,同时因微服务及云原生的复杂性给系统运维带来非常大的挑战,云原生应用监控arms通过全链路应用监控,从端到端及代码级别的链路下钻能力、CPU、内存持续剖析及诊断能力,帮助客户降低系统故障定位难度,此demo,您将体验arms的链路监控、内存剖析等能力 应用场景 微服务+容器场景下链路调用拓扑,调用链可以显示出服务之间的调用顺序和层次关系,帮助开发人员理解和追踪代码的执行流程 在分布式系统中,一个请求往往需要通过多个服务来完成。当出现问题时,如请求超时、错误或异常,很难快速定位问题所在。 解决问题 调用链可以帮助运维人员解决以下问题: · 故障排查:当请求失败或出现错误时,调用链可以显示整个请求的路径和每个服务的执行情况,从而帮助运维人员快速定位问题所在。 · 性能优化:通过调用链,运维人员可以了解请求在系统中的执行时间和瓶颈所在,从而进行优化。 · 系统监测:调用链可以提供实时的系统监测和分析,帮助运维人员了解系统的健康状况和资源利用情况。
产品介绍  MSE微服务引擎:微服务引擎MSE 面向业界主流开源微服务项目,提供注册配置中心 和分布式协调(原生支持 Nacos/ZooKeeper/Eureka)、云原生网关(原生支持 Higress/Nginx/Envoy,遵循 Ingress 标准)、微服务治理和分布式任务调度能力(兼容开 源XXL-JOB/ElasticJob/K8sJob/SpringSchedule)。 专有网络VPC...
来自: 最佳实践 | 相关产品:弹性公网IP,容器服务 ACK,NAT网关,微服务引擎
基于SpringCloud应用玩转MSE实践
基于SpringCloud应用玩转MSE实践
随着业务不断创新,大型的单个应用和服务会被拆分为数个甚至数十个微服务,微服务架构已经被广泛应用。 微服务的好处在于快速迭代,如何在迭代过程中保障线上流量不受损。依赖开源产品缺少无运维工具,常常需要投入较大的运维人力和成本。 本实践提供基于云原生应用产品提供微服务注册配置中心、微服务治理和云原生网关等一系列高性能和高可用的企业级云服务能力。
 微服务引擎MSE(MicroserviceEngine),面向业界主流开源微服务项目,提供注册配置中心和分布 式协调(原生支持 Nacos/ZooKeeper/Eureka)、云原生网关(原生支持 Higress/Nginx/Envoy,遵 循 Ingress 标准)、微服务治理和分布式任务调度能力(兼容开源 XXL-JOB/ElasticJob/K8sJob/Spring Schedule)。 容器服务 ...
来自: 最佳实践 | 相关产品:弹性公网IP,容器服务 ACK,日志服务(SLS),NAT网关,微服务引擎,消息队列 RocketMQ 版,云速搭
基于MSE和SAE的微服务部署与压测
基于MSE和SAE的微服务部署与压测
通过云原生微服务引擎MSE、SAE、PTS、ARMS产品,为spring cloud微服务应用提供部署和测试能力,提供一个经典微服务应用上云的典型架构,实现微服务应用的快速落地。
 微服务引擎MSE:微服务引擎 MSE 面向业界主流开源微服务项目,提供注 册配置中心和分布式协调(原生支持 Nacos/ZooKeeper/Eureka)、云原生网 关(原生支持Higress/Nginx/Envoy,遵循Ingress 标准)、微服务治理和分布 式任务调度能力(兼容开源XXL-JOB/ElasticJob/K8sJob/SpringSchedule)。 Serverless应用引擎 SAE...
来自: 最佳实践 | 相关产品:负载均衡 SLB,弹性公网IP,性能测试 PTS,应用实时监控服务 ARMS ,Serverless 应用引擎,微服务引擎,云速搭
云效项目协作Projex
阿里云云效项目协作 Projex提供项目管理、迭代规划、需求管理、缺陷管理、任务管理等项目管理功能及效能数据统计,支持单项目管理、跨项目协作等丰富的协作场景
支持需求在业务空间、产品空间、研发空间等不同项目中流转.支持需求跨项目流转.提供工时统计、研发质量、软件交付等丰富的研发效能度量数据.多场景的效能度量.与云效代码托管、云效流水线等产品打通,一套账号,打通全部系统‍,数据不再割裂.与 DevOps 一站式工具链打通.管理需求从提出、设计、开发、测试、发布的完整流程...
来自: 云产品
基于云速搭CADT快速构建药物筛选批量计算环境-serverless版
基于云速搭CADT快速构建药物筛选批量计算环境-serverless版
本方案基于云速搭 CADT提供一个快速构建云上Serverless版HPC批量计算环境的模板,针对生物制药领域的药物筛选场景,提供开箱即用的整套解决方案工具包,整个云上环境仅需1个小时即可完成自动化部署搭建。
(代码源可以根据实际项目情况自行决定,本方案示例采用本地仓库模式)文档版本:20240204 21 基于云速搭 CADT部署药物筛选批量计算环境-Serverless版 CADT部署环境 拷贝上述命令,为后续上传镜像做准备。3.5.4.环境变量设置 步骤24 维护环境变量信息。打开文件/mnt/bio-projects/env.sh 修改下面红色框选的配置信息,下列...
来自: 最佳实践 | 相关产品:弹性公网IP,文件存储NAS,日志服务(SLS),容器镜像服务 ACR,操作审计,密钥管理服务,云防火墙,弹性高性能计算E-HPC,云速搭
新版产品集合页
基于丰富的产品,将计算、存储、网络、数据库、大数据、人工智能等最新产品技术与场景深度融合,为开发者打造稳定可靠的云基础设施以及云原生的开发环境。
全息空间提供对物理世界真实1:1还原的模型能力,通过三维视觉算法及空间计算能力等 AI 技术建立虚拟空间,可以基于场景叠加各种空间信息和服务。自然语言处理NLP 基础服务为各类企业及开发者提供的用于文本分析及挖掘的核心工具,已经广泛应用在电商、文化娱乐、金融、物流等行业客户的多业务中。NLP 自学习平台支持文本...
来自: 云产品
云数据库 RDS MySQL 版
阿里云云数据库RDS MySQL是一种稳定可靠、可弹性伸缩的在线MySQL数据库服务, 提供了高可用、高可靠、高安全、易运维等一站式的数据库解决方案,帮助您免除MySQL运维的烦恼。
在创业型公司或阿米巴模式经营的公司,新项目发布初期存在较大的不确定性,既要考虑项目未来的扩展性,又要衡量项目的运营成本。该RDS MySQL解决方案为客户提供低成本,敏捷快速的最佳实践。典型行业:传统企业、游戏和零售等行业。单元化部署系统可以按地域等规则拆解成多个独立小系统单元化部署,利用云数据库RDS MySQL高...
来自: 云产品
对象存储 OSS
阿里云对象存储 OSS(Object Storage Service)是一款海量、安全、低成本、高可靠的云备份服务,提供最高可达 99.995 % 的服务可用性。多种存储类型供选择,全面优化存储成本。
客户案例“阿里云数据迁移上云解决方案,帮助 115科技完成中国互联网史上首个百 PB 级数据量的公共云迁移项目。115科技将运用阿里云全球领先的人工智能和自然语言处理技术,开启全新的云上征程。—— 115科技董事长兼总经理 赖霖枫“借助阿里云的 E-MapReduce 和 OSS-HDFS,我们构建了喜马拉雅云原生大数据平台,并结合...
来自: 云产品
数据库和应用迁移 ADAM
数据库和应用迁移 Advanced Database & Application Migration(以下简称 ADAM)是一款把数据库和应用迁移到阿里云(公共云或专有云)的产品,支持 Oracle、Teradata、Db2 的异构迁移上云。ADAM 全面评估上云可行性、成本和云存储选型,内置实施协助、数据迁移、应用迁移等工具,确保可靠、快速、低成本上云。
收集并汇总 Oracle 数据库信息,包含:环境信息、对象信息、SQL 信息、空间信息、性能信息、事务信息六大部分,全面覆盖数据库实际运行状况.存储与运行环境信息采集.信息采集同时,针对数据冗余、信息安全问题,数据采集器对采集结果中 SQL 数据进行脱敏、去重、一致性校验等处理,保证采集结果的准确性.数据去重、数据脱敏...
来自: 云产品
Spring Cloud Netflix应用迁移EDAS
Spring Cloud Netflix应用迁移EDAS
场景描述 Spring Cloud Netflix微服务应用迁移到EDAS 服务(SpringCloud Alibaba云版本)的方法, 迁移后充分利用阿里云监控、调用链、限流降级 等能力,优化应用生命周期管理。 解决问题 1.帮助自建SpringCloudNetflix微服务应用 通过简单修改迁移到阿里云企业级分布式 应用服务(EDAS)平台。 2.迁移到EDAS后,简化应用的运维,提升监 控、调用链探测、限流降级等管理能力,提 高对应用的全生命周期管理。 产品列表 企业级分布式应用服务(EDAS) 负载均衡(SLB) 专有网络(VPC) 云服务器(ECS)
说明:建议创建命名空间,保证应用的隔离性。步骤5 在创建命名空间对话框中,完成以下配置,并单击创建。文档版本:20200106 45 Spring Cloud Netflix应用迁移 EDAS 微服务应用部署 EDAS环境 命名空间名称:pig 命名空间 ID:cn-beijing:pig 步骤6 创建 EDAS集群。在左侧导航栏选择资源管理>集群,在 EDAS集群页签下,...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,负载均衡 SLB,企业级分布式应用服务 EDAS
微服务引擎MSE
微服务引擎 MSE 面向业界注册配置中心、分布式协调、云原生网关、微服务治理和分布式任务调度等主流开源项目,提供商业版服务。
查看 MSE 的产品文档.MSE常见问题.查看 MSE 入门教程.加入钉群了解更多.基于开源增强、多 AZ 部署、节点异常自愈等设计,服务可用性 SLA 达 99.95%....多用户隔离机制,支持命名空间和应用级别的隔离.提供托管式的任务管理、易接入、易运维,大大降低了自建平台的成本的同时,提升了研发效能.分布式任务调度.
来自: 云产品
云速搭部署 ALB 实现负载分发
云速搭部署 ALB 实现负载分发
本实践通过云速搭构建一个基于 http(s)的负载均衡业务架构,实现终端浏览器发起http(s)请求后,经过 ALB 监听配置的转发规则,分别负载分担到后端 ECS 服务器、CLB 和 ACK 集群。
选择资源丰富、离用户近的区 VPC名 vpc-HZ-CADT-域保障项目顺利实施。DEMO 网络规划留足可用 IP数即可。网段 172.10.0.0/16 虚拟交换机 状态 新购(根据实际情况 选择新购或已保有,本最佳实践新购交换 机)vswitch名 vswitch_H 可用区 华东 1 可用区 H IPv4网段 172.10.0.0/24 vswitch名 vswitch_I 文档版本:20211028 5 ...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,负载均衡 SLB,弹性公网IP,容器服务 ACK,云速搭CADT
CDH迁移升级CDP最佳实践
CDH迁移升级CDP最佳实践
当前 CDH 免费版停止下载,终止服务,针对需要企业版服务能力并且CDH 升级过程对业务影响较小的客户,通过安装新的 CDP 集群,将现有数据拷贝至新集群,然后将新集群切换为生产集群,升级过程没有数据丢失风险,停机时间较短,适合大部分互联网客户升级使用。
名词解释 CDH:hadoop是一个开源项目,所以很多公司在这个基础进行商业化,Cloudera 对 hadoop 做了相应的改变。Cloudera 公司的发行版,我们将该版本称为 CDH(Cloudera Distribution Hadoop)。CDP:Cloudera 对 hadoop 做了商业化版本,面向 IT 和企业的大数据平台 Cloudera Data Platform(CDP),是 CDH的升级版。云...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,云速搭
< 1 2 3 4 5 >
共有5页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用