数据管理 DMS
阿里云数据管理服务 DMS 是一款支撑企业 Data+AI 全生命周期的一站式数据管理平台,助您高效、安全地挖掘数据价值和数据库设计开发,以数据驱动决策与创新。
查看更多Data+AI全链路以Notebook为核心串联数据库开发、数据集成、工作流编排、数据准备、数据可视化、模型开发实现从数据生产到价值交付的全链路能力,赋能业务开发团队(数据库开发、运营、产品、分析师、科学家、数仓开发等)不断放大数据价值。查看更多分布式数据管理阿里巴巴分布式数据管理最佳实践,基于DataMesh...
来自: 云产品
云原生数据仓库AnalyticDB PostgreSQL版
阿里云MPP架构的云原生数据仓库,可提供PB级海量数据在线/离线分析服务,是面向各行各业的有竞争力的数仓方案,真正做到“人人可用的数据分析服务”。
用户现有的OLTP数据库实例,包括 RDS MySQL,PostgreSQL,或传统数据库实例 Oracle,SQL Server等,数据可以通过 数据传输服务 DTS,数据集成服务 Dataworks 等实时同步到云原生数据仓库AnalyticDB PostgreSQL版,构筑可线性扩展的在线企业数据仓库服务。同时可以结合 Dataworks 的 ETL 调度功能,基于 AnalyticDB for ...
来自: 云产品
应用实时监控服务ARMS
作为云原生可观测平台,应用实时监控服务 ARMS 包含前端监控、应用监控、云拨测等模块。覆盖浏览器、小程序、APP、分布式应用、容器等不同可观测环境与场景。帮助企业实现全栈性能监控与端到端追踪诊断。提高监控效率,压降运维工作量。
实例监控展示了应用服务对应的实例副本监控信息,包括基础类监控信息,如请求数、错误数、平均耗时、实例数、CPU 使用率和内存使用量,还支持丰富的网络性能监控信息。事件分析功能是基于已产生的告警事件明细数据,自由组合筛选条件进行实时分析,可以满足不同场景的自定义分析诊断需求。通过创建应用监控告警规则,您可以...
来自: 云产品
数据库备份DBS
数据库备份(Database Backup,简称DBS)是为数据库提供连续数据保护、低成本的备份服务。它可以为多种环境的数据提供强有力的保护,包括企业数据中心、其他云厂商、混合云及公共云。通过使用阿里实时数据流技术,实现数据库秒级备份,秒级恢复,保障数据安全。
备份数据湖分析 DBS与阿里云云原生数据湖分析DLA深度集成,提供备份在线查询能力,无需恢复备份数据,直接查询云存储中备份数据,激活沉睡数据价值。应用场景应急恢复 混合云备份 RDS一键异地备份 ISV备份方案集成 业务痛点:数据备份、恢复时间长 数据备份、恢复时间长,海量数据备份成本高,人为恢复数据操作风险高...
来自: 云产品
可观测监控 Prometheus 版
覆盖业务自定义监控/应用组件监控/云服务监控/容器监控/系统监控等场景。默认集成Grafana看板与智能告警,全面优化系统可用性与查询能力,用户无需关注系统可用性与Exporter集成。帮助企业快速搭建一站式指标可观测体系。
作为云原生的运维数据可视化平台,面向用户提供免运维和快速启动 Grafana 运行环境的能力,默认集成如数据库 MySQL、消息队列 RockteMQ、实时计算 Flink、Elasticsearch、可观测监控 Prometheus 版、日志服务SLS等各类阿里云服务数据源,并提供丰富的数据看板,让运维监控更加高效、精细.支持按需发起压测任务,可提供百万...
来自: 云产品
人工智能平台 PAI
阿里云人工智能平台 PAI 涵盖交互式建模、可视化建模、分布式训练到模型在线部署全流程;快速搭建人工智能推荐系统;深度学习模型训练速度提升数十倍;减少50%GPU成本
通过数据集加速、计算加速、优化算法、调度算法和资源优化技术等多种手段,提高AI训练和推理的速度、易用性和稳定性,极大提升AI计算的效率.AI加速服务.进一步了解AI加速服务.通义千问开源模型在PAI灵骏的最佳实践.PAI-ACC为企业提供AI训练推理加速服务.【重磅-持续更新】阿里云AI开源项目合集.大模型RAG对话系统最佳实践....
来自: 云产品
多媒体数据存储与分发
多媒体数据存储与分发解决方案融合对象存储 OSS、内容分发 CDN 、智能媒体管理 IMM 等产品能力,解决客户多媒体数据存储、处理、加速、分发等业务问题,进而实现低成本、高稳定性的业务目标。本技术解决方案以搭建一个多媒体数据存储与分发服务为例,搭建一个多媒体数据存储与分发服务。
本技术解决方案以搭建一个多媒体数据存储与分发服务为,搭建一个多媒体数据存储与分发服务。多媒体数据存储与分发 多媒体数据存储与分发解决方案融合对象存储 OSS、内容分发 CDN、智能媒体管理 IMM 等产品能力,解决客户多媒体数据存储、处理、加速、分发等业务问题,进而实现低成本、高稳定性的业务目标。本技术解决方案...
多源集成,极致性能,搭建轻量OLAP分析平台
本方案基于阿里云Hologres和DataWorks数据集成,通过简单的产品操作即可完成数据库RDS实时同步数据到Hologres,并通过Hologres强大的查询分析性能,完成一站式高性能的OLAP数据分析。
本方案基于阿里云Hologres和DataWorks数据集成,通过简单的产品操作即可完成数据库RDS实时同步数据到Hologres,并通过Hologres强大的查询分析性能,完成一站式高性能的OLAP数据分析。多源集成,极致性能,搭建轻量OLAP分析平台 本方案基于阿里云Hologres和DataWorks数据集成,通过简单的产品操作即可完成数据库RDS实时同步...
灵活配置,高效执行,快速集成分布式任务调度
企业级应用中经常会遇到数据定时处理、文件处理、报表生成等定时处理的任务,对于任务配置和执行率有较高要求,本文介绍如何利用SchedulerX来实施企业级定时任务的调度与管理,为定时任务提供高效、稳定和灵活的解决方案。
灵活配置,高效执行,快速集成分布式任务调度 企业级应用中经常会遇到数据定时处理、文件处理、报表生成等定时处理的任务,对于任务配置和执行率有较高要求,本文介绍如何利用SchedulerX来实施企业级定时任务的调度与管理,为定时任务提供高效、稳定和灵活的解决方案。在线部署 适用客户 有托管式任务管理需求 需要处理大...
Flink+Hologres搭建实时数仓
本方案将Hologres与Flink深度集成,提供一体化的实时数仓联合解决方案,实现了数仓分层之间实时数据的高效流动,解决实时数仓分层问题。本方案能够支撑实时推荐、实时风控等多种实时数仓应用场景,满足企业的实时分析需求,具有中间层数据可查、支持数仓分层复用和架构简单等优势。
本方案将Hologres与Flink深度集成,提供一体化的实时数仓联合解决方案,实现了数仓分层之间实时数据的高效流动,解决实时数仓分层问题。本方案能够支撑实时推荐、实时风控等多种实时数仓应用场景,满足企业的实时分析需求,具有中间层数据可查、支持数仓分层复用和架构简单等优势。Flink+Hologres搭建实时数仓 本方案将...
AnalyticDB MySQL湖仓版的用户运营分析实践
本方案使用AnalyticDB MySQL湖仓版实现对应用数据的分析,只需一个湖仓版实例就能完成“数据入湖+作业开发+在线分析”的一站式用户运营数据分析,提供更高效的数据处理方案与更低的数据存储成本。
数据集成 覆盖日志、消息、数据库、HDFS等结构化和非结构化的数据源,可以将多个数据源的数据进行整合。即席查询与自助分析 实时数据可直接接入BI工具,实现实时自主分析,快速洞察数据,可帮助企业优化业务流程、提高效率、降低成本。优惠购买 阿里云为你推荐优惠购买云产品 优惠购买 10000012142 10000001833 10000009644...
开源大数据平台 E-MapReduce 产品概述
开源大数据平台 E-MapReduce是阿里云提供的云原生开源大数据平台,支持多种主流开源大数据组件,具备灵活弹性的资源调度和控制能力。适用于PB 级数据处理、交互分析和机器学习,帮助客户高效构建云端企业级数据湖技术架构。
E-MapReduce 弹性稳定、存算分离,帮您快速构建AI时代开源大数据平台底座立即购买免费试用100%兼容开源100%采用社区开源组件,随开源版本升级迭代安全可靠分钟级搭建大数据计算环境,智能诊断分析,Kerberos身份认证,数据加密等节约成本计算资源按需使用,自动数据冷热分层存储,支持阿里云抢占式实例等弹性资源支持按负载/...
来自: 云产品
通过PAI-灵骏分布式训练和部署Llama 2模型
灵骏支持业界各类流行的开源大语言模型,包括Llama2系列、Bloom系列、Falcon系列、GLM/ChatGLM系列,以及领域大模型galactica等的高效训练和部署。本方案整体可用于企业样本标注、创意文本生成、智能对话助手、文本类创作辅助等场景。
用户在规划好网络和资源、完成资源部署后,可通过Huggingface 或 ModelScope等社区渠道下载Llama2模型,并可在灵骏智算平台的DSW实例中,完成准备预训练数据准备;训练阶段提供多种方案,保障模型效果的同时,提升大模型分布式训练效率;训练所获得的模型可上传至对象存储OSS,并且能够便捷地在PAI-EAS平台部署大模型推理...
开源大数据平台 E-MapReduce 产品功能
阿里云开源大数据平台 E-MapReduce 为客户提供简单易集成的Hadoop、Hive、Spark、StarRocks、Flink、Presto、ClickHouse等开源大数据计算和存储引擎。EMR计算资源支持灵活的弹性控制。EMR支持on ECS、on ACK以及Serverless多种部署形态。
开发调度EMR Workflow是一个Serverless化的交互式数据分析和探索平台,满足大数据和AI融合下的数据处理需求,为数据工程师、数据分析师和数据科学家提供了可视化的应用程序开发环境。通过EMR Notebook可以完成对SQL、Python、Markdown等多种语言程序的代码的编写、调试和执行。EMR Notebook是一个全托管的工作流和任务调度...
来自: 云产品
DTS数据同步集成MaxCompute数仓
DTS<em>数据</em>同步<em>集成</em>MaxCompute数仓
场景描述 本文Step by Step介绍了通过数据传输服务 DTS实现从云数据库RDS到MaxCompute的 数据同步集成,并介绍如何使用DTS和 MaxCompute数仓联合实现数据ETL幂等和数 据生命周期快速回溯。 解决问题 1.实现大数据实时同步集成。 2.实现数据ETL幂等。 3.实现数据生命周期快速回溯。 产品列表 MaxCompute 数据传输服务DTS DataWorks 云数据库RDS MySQL 版
对无数据变更日期的表,仍然可 以通过 binlog的时间来生成创建/修改时间,兼容性更好,同时使用 DTS提高了数据 集成的实时性,实现准实时同步。3.2.1.通过 DTS实现数据同步 3.2.1.1.配置 DTS数据同步 注意事项 1.DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源,可能会导致 数据库的负载上升,在数据库性能较...
来自: 最佳实践 | 相关产品:专有网络 VPC,云数据库RDS MySQL 版,数据传输,DataWorks,大数据计算服务 MaxCompute
EMR本地盘实例大规模数据集测试
场景描述 阿里云为了满足大数据场景下的存储需求,在云 上推出了本地盘D1机型,这个系列提供了本地 盘而非云盘作为存储,提高了磁盘的吞吐能力, 发挥Hadoop的就近计算优势。阿里云EMR 产品针对本地盘机型,推出了一整套的自动化运 维方案,帮助用户方便可靠地使用本地盘机型, 不需要关注整个运维过程同时数据的高可靠和 服务的高可用。 解决问题 1.云盘多份冗余数据导致成本高 2.磁盘吞吐量不高 3.节点的高可靠分布问题 4.本地盘与节点的故障监控问题 5.数据迁移时自动决策问题 6.自动故障节点迁移与数据平衡问题 产品列表 EMR(E-MapReduce) 本地盘 VPC
Master节点 通常可以生成 1TB的数据进行基准性能测试,首先进入 hive-testbench目录下执行如 下脚本并加载测试数据 参数说明:数据集规模参数单位为 GB,1000表示生成的数据量为 1TB/tpcdata/tpcds 为表数据生成的目录,目录不存在就自动生成,如果不指定目录, 目录就默认生成到/tmp/tpcds目录下 cd hive-testbench#如果...
来自: 最佳实践 | 相关产品:块存储,云服务器ECS,E-MapReduce
< 1 2 3 4 ... 17 >
共有17页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用