数据集成 Data Integration
阿里云数据集成 Data Integration是跨异构数据、低成本、弹性扩展的数据采集同步平台,为DataX的商业版,支持ETL,支持50+数据源跨网络离线(全量/增量)同步。
数据集成(Data Integration)比DataX更加高效、安全,且支持50+异构数据源之间的相互数据同步,通过数据源的Reader、Writer插件,无需用户实现复杂的编程,支持分库分表.支持多种异构数据源.批量(离线)数据的全量/增量同步.批量同步主要应用场景为阿里云大数据计算存储(包括 MaxCompute、AnalyticDB、HDFS等)提供离线...
来自: 云产品
DTS数据同步集成MaxCompute数仓
DTS<em>数据</em>同步<em>集成</em>MaxCompute数仓
场景描述 本文Step by Step介绍了通过数据传输服务 DTS实现从云数据库RDS到MaxCompute的 数据同步集成,并介绍如何使用DTS和 MaxCompute数仓联合实现数据ETL幂等和数 据生命周期快速回溯。 解决问题 1.实现大数据实时同步集成。 2.实现数据ETL幂等。 3.实现数据生命周期快速回溯。 产品列表 MaxCompute 数据传输服务DTS DataWorks 云数据库RDS MySQL 版
数据抽取不幂等或容错率低,如凌晨 0:00启动的 ETL任务因为各种原因(数据库 HA切换、网络抖动或 MAXC写入失败等)失败后,再次抽取无法获取 0:00时的 状态。2.针对不规范设计表,如没有 create_time/update_time的历史遗留表,传统 ETL需 全量抽取。3.实时性差,抽取数据+重试任务往往需要 1-3小时。另外数据库的数据...
来自: 最佳实践 | 相关产品:专有网络 VPC,云数据库RDS MySQL 版,数据传输,DataWorks,大数据计算服务 MaxCompute
云上数据集成解决方案
云上数据集成解决方案提供可跨异构数据存储系统、可靠、安全、低成本、可弹性扩展的数据传输交互服务,有效帮助您解 决云环境、个人站点环境下异构数据存储系统的数据互通难题,让您数据不再成为孤岛!助您实现大数据分析和实时商务智能。
离线(批量)的数据同步主要通过定义数据来源和去向的数据源和数据,由数据集成提供一套抽象化的数据抽取插件(称之为Reader)、数据写入插件(称之为Writer),并基于此框架设计一套简化版的中间数据传输格式,从而达到任意结构化、半结构化数据源之间数据传输的目的。这期间也会涉及到数据源本身所处的网络,针对于各种...
来自: 解决方案
数据管理DMS
数据管理DMS是基于阿里巴巴集团十余年的数据库服务平台的云版本,提供免安装、免运维、即开即用、多种数据库类型与多种环境统一的web数据库管理终端;可以为企业用户快速复制搭建与阿里集团同等安全、高效、规范的数据库DevOps研发流程解决方案。
支持26种常见数据源的实时及离线数据集成,且数据集成过程中,支持灵活自定义的数据处理逻辑,助力解决企业数据孤岛的痛点.实时数据集成.提供覆盖数据全生命周期的数据流转及处理能力。通过图形化/向导式的开发模式、智能预警及自主诊断修复等能力,降低企业数据价值挖掘门槛.提供覆盖数据全生命周期的DataOps,内置阿里...
来自: 云产品
云原生数据仓库AnalyticDB PostgreSQL版
阿里云MPP架构的云原生数据仓库,可提供PB级海量数据在线/离线分析服务,是面向各行各业的有竞争力的数仓方案,真正做到“人人可用的数据分析服务”。
用户现有的OLTP数据库实例,包括 RDS MySQL,PostgreSQL,或传统数据库实例 Oracle,SQL Server等,数据可以通过 数据传输服务 DTS,数据集成服务 Dataworks 等实时同步到云原生数据仓库AnalyticDB PostgreSQL版,构筑可线性扩展的在线企业数据仓库服务。同时可以结合 Dataworks 的 ETL 调度功能,基于 AnalyticDB for ...
来自: 云产品
应用实时监控服务ARMS
作为云原生可观测平台,应用实时监控服务 ARMS 包含前端监控、应用监控、云拨测等模块。覆盖浏览器、小程序、APP、分布式应用、容器等不同可观测环境与场景。帮助企业实现全栈性能监控与端到端追踪诊断。提高监控效率,压降运维工作量。
提供各种云服务的数据源配置及预置大盘,实现各种可观测数据的统一展示.针对容器服务ACK等主流服务提供 Pro 大盘模板.针对容器服务ACK、消息队列 Kafka 等主流云服务,提供 Grafana Pro 大盘,帮助运维进行更精细化指标观测.Grafana 插件自由扩展.通过 Grafana 官方自由增加新插件,添加新的可视化模板以及数据源,进一步...
来自: 云产品
数据库备份DBS
数据库备份(Database Backup,简称DBS)是为数据库提供连续数据保护、低成本的备份服务。它可以为多种环境的数据提供强有力的保护,包括企业数据中心、其他云厂商、混合云及公共云。通过使用阿里实时数据流技术,实现数据库秒级备份,秒级恢复,保障数据安全。
备份数据湖分析.DBS与阿里云云原生数据湖分析DLA深度集成,提供备份在线查询能力,无需恢复备份数据,直接查询云存储中备份数据,激活沉睡数据价值.提供秒级恢复、恢复演练等能力,确保数据高可用、高安全;并借助沙箱实例、备份数据湖分析等功能,激活沉睡数据价值.多项企业级能力,赋予备份新价值.查看DBS使用文档....
来自: 云产品
可观测可视化 Grafana 版
可观测可视化 Grafana 版作为云原生数据可视化平台,为运维SRE、研发工程师、产品经理、市场营销等不同角色提供开箱即用的一站式可视化平台,满足运维监控、经营分析、汇报展示等不同场景的查询、可视化、告警需求。
数据源数据存储时长及费用.支持(Prometheus监控大盘模板一键同步,其他类型模板可自选Grafana官方模板).是否有默认模板.无需单独配置,支持独立公网 IP.SSO 与 Grafana 账号打通,无需单独创建.自行配置单独 Grafana 账号.控制台白屏化操作.命令行手工操作.始终保持官方最新开源版本.独享实例&SLA 保障(多副本&独享高性能...
来自: 云产品
服务网格
阿里云服务网格(简称ASM)是一个统一管理微服务应用流量的托管式平台,兼容Istio。通过流量控制、网格观测以及服务间通信安全等功能,可以全方位地简化您的服务治理。它为运行在异构计算基础设施上的服务提供统一的能力,适用于Kubernetes集群、Serverless Kubernetes集群、ECS虚拟机以及自建集群。
集成阿里云中间件云产品,提 供托管的链路观测、监测、告 警、日志等可观测能力.增强的数据平面可观测性.单一网格实例可管理不同环境下多个集群,结合阿里云云企业网等轻松实现跨地域混合云应用流量统一管理.跨集群跨区域统一流量管理.支持容器应用和虚拟机应 用间的流量管理,适合容 器化上云的平滑迁移场景.支持多种基础...
来自: 云产品
可观测监控 Prometheus 版
覆盖业务自定义监控/应用组件监控/云服务监控/容器监控/系统监控等场景。默认集成Grafana看板与智能告警,全面优化系统可用性与查询能力,用户无需关注系统可用性与Exporter集成。帮助企业快速搭建一站式指标可观测体系。
自行接入 Alertmanager 插件.600w 数据点.100w 数据点.单副本采集性能(2C4G).数据查询性能(6亿时间点).阿里云安全能力全面加持,并支持鉴权功能.支持预聚合、降采样等能力.阿里云可观测监控 Prometheus 版.自建 Prometheus 监控.使用可观测监控 Prometheus 版监控云服务.使用可观测监控 Prometheus 版进行组件监控.使用...
来自: 云产品
全域采集与增长分析Quick Tracking
全域采集与增长分析(Quick Tracking)是阿里云推出的应用数据采集及分析产品,为运营、BI、产品和决策层提供一站式数据化运营服务:通用的多维度用户行为分析、自助分析功能、数据无缝对接其他大数据产品,助每个企业实现基于大数据技术的精细化运营能力。
打通广告品牌效果投放数据和用户行为数据,用“价值导向”替代“流量导向”全链路评估广告投放效果,优化投放策略,实现ROI倍增.多种链码自动生成,一手掌握渠道投放链接.渠道链接管理.适配各角色评估需求,如按首次渠道/本次渠道/末次有效渠道归因.渠道归因模型.洞察渠道价值,优化投放策略.获客效果评估.借助多种维度分析...
来自: 云产品
云速搭 CADT
阿里云云速搭 CADT是一款自助式云架构管理的产品,它可提供丰富的预制应用架构模板,用户可方便的对云架构方案的成本、部署、运维、回收进行全生命周期的管理。
监控大屏支持几十种资源的实时性能数据展示,同时支持对监控指标的个性化选择,支持对性能数据的聚合、下钻、TopN等操作,还可在拓扑图上看到性能指标直方图等.性能数据展示.监控大屏支持配置告警模版和告警规则,将告警模版和应用绑定后,系统就可以根据模板中配置的告警规则产生告警。当某资源出现告警后,可以在大屏上...
来自: 云产品
人工智能平台 PAI
阿里云人工智能平台 PAI 涵盖交互式建模、可视化建模、分布式训练到模型在线部署全流程;快速搭建人工智能推荐系统;深度学习模型训练速度提升数十倍;减少50%GPU成本
通过数据集加速、计算加速、优化算法、调度算法和资源优化技术等多种手段,提高AI训练和推理的速度、易用性和稳定性,极大提升AI计算的效率.AI加速服务.进一步了解AI加速服务.查看全部日志.丰富的灵骏产品形态.Serverless平台产品,一键快速拉起AI计算任务,复杂异构系统自动运维,轻松管理。与云上的计算、存储、网络等...
来自: 云产品
应用身份服务IDaaS
IDaaS是阿里云为企业用户提供的一套集中式身份、权限、应用管理服务,支持一个账号打通所有业务应用,统一控制多因子身份认证,集中管理的应用访问权限控制,集中透明的用户访问日志审计,助力企业解决单点登录问题,是5A统一身份认证管理系统。使用场景分为CIAM和EIAM,是国内第一家提供完整公有云、私有化 CIAM 解决方案的服务提供方。
提供一系列预集成应用模板,且会随版本和需求逐步累积,为客户常用应用提供极简的、精心设计的对接体验.联通企业通讯录.与钉钉、AD、企业微信、飞书等企业账户体系打通,支持批量和增量导入/导出,打通企业的身份孤岛.统一账户管理.提供唯一的用户身份,以及完整的账户生命周期管理。在控制台中,可完成员工账户入职全过程....
来自: 云产品
保险数据中台解决方案
保险数据中台解决方案为保险企业提供完整数据中台方案,包含数据中台内容建设、数据资产管理、数据智能研发、数据消费、数据服务、数据实验室等组成部分,适应数字产业发展,以金融科技为企业赋能。
统一的数据集成管理.全域数据分析主题和场景设计。根据保险领域的应用领域和类别,结合险企业务流程中的实际痛点和问题,确定分析洞察主题及围绕每个主题的分析场景,最终产出和确定各个分析洞察场景的核心分析维度和指标.高效的数据内容加工、服务能力.结合平台(技术)+制度(规范)+运营(生态),以数据资产+数据质量+...
来自: 解决方案
交通数据中台解决方案
阿里云交通数据中台解决方案提供从交通数据接入到数据应用的全链路智能数据构建与管理能力,帮助客户快速形成数据资产、挖掘数据价值、赋能交通业务,助力交通行业数字化转型及智能应用的创新和推广。
统一的数据集成管理.管理数据“汇聚-治理-分析-决策”全⽣命周期,打通从数据生产到数据消费完整链路;统一消费侧的逻辑访问层,屏蔽物理存储结构、异构数据存储的差异,降低数据应用的门槛.高效的数据加工和服务.针对沉淀的交通数据资产,提供数据识别、敏感数据发现、数据分类分级、脱敏、访问监控、风险发现预警与审计...
来自: 解决方案
互联网电商行业离线大数据分析
互联网电商行业离线大<em>数据</em>分析
电商网站销售数据通过大数据分析后将业务指标数据在大屏幕上展示,如销售指标、客户指标、销售排名、订单地区分布等。大屏上销售数据可视化动态展示,效果震撼,触控大屏支持用户自助查询数据,极大地增强数据的可读性。
基于模版新建 DataV 默认配置 新用户可以选择使用互联网电商行业离线大数据分析 搭建电商网站Demo 版 API网关 数据发布网关 默认配置 基于模版新建 付费基础版 基于模版新建 DataWorks独享资 源,2个 独享数据服务资源:dataworks 其他参考默认配置 选择api.s2.small 独享数据集成资源:选择4C8G,资源 量2个 MaxCompute ...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,DataWorks,大数据计算服务 MaxCompute,DataV数据可视化,API网关,云速搭CADT
用户内容智能推荐解决方案
用户内容智能推荐解决方案通过云上构建实时智能商品和内容推荐平台,帮助企业客户快速建立用户画像和推荐算法模型,提供个性化商品推荐,大幅提高销售效率。
稳定成熟的数据集成工具.阿里巴巴集团多行业和多场景的长期深耕,提供更精准的推荐策略,使智能推荐结果深度贴合不同用户的业务需求.精准的推荐策略.开箱即用的检索数据分析和算法推荐平台,高弹性、高可靠性、高性能的智能推荐平台满足业务高速发展的需求。开箱即用的推荐平台.智能推荐 AIRec.机器学习平台PAI.检索分析...
来自: 解决方案
云采销数智化采购
云采销数智化采购基于阿里云先进智能算法能力,面向企业提供数据智能服务、一站式采购的一体化产品,能帮助企业采购管理降本增效以及跨企业高效协同。
提供供应商准入、归档、绩效、分层、退出生命周期链路支撑与广泛的数据集成,实现一体化流程体验.供应商管理流程断点.在供应商生命周期链路,以及寻源履约协作场景中引入数据智能风控服务,实现供应商360°风控.供应商风控管理不足.供应商协同管理.供应商生命周期与风险服务.云采销数智化采购提供海量商家资源对接,包括...
来自: 云产品
阿里云最佳实践离线大数据workshop
阿里云最佳实践离线大数据workshop
本最佳实践,首先搭建一个简化的电商 demo 系统,然后为此 demo 系统构建一套离 线大数据分析系统。 实践目标 1. 学习搭建一个离线大数据分析系统,学习从数据采集到数据存储和业务分析的业 务流程。 2. 整个离线大数据分析系统全部基于阿里云产品进行搭建,学习掌运用各个服务组 件及各个组件之间如何联动。 背景知识要求 熟练掌握 SQL 语法 对大数据体系系统知识有一定的了解
MaxCompute向用户提供了完善的数据导入方 案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有 效 降 低 企 业 本,并 保 障 安 全。详 见:https://help.aliyun.com/product/27797.html  Dataworks:DataWorks基于MaxCompute/EMR/MC-Hologres等大数据计算引 文档版本:20210802(发布...
来自: 最佳实践 | 相关产品:云服务器ECS,云数据库RDS MySQL 版,对象存储 OSS,日志服务(SLS),大数据计算服务 MaxCompute,DataV数据可视化,数据总线,Quick BI,云速搭
< 1 2 3 4 ... 22 >
共有22页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用