智能数据建设与治理Dataphin
Dataphin遵循阿里巴巴集团多年实战沉淀的大数据建设OneData体系(OneModel、OneID、OneService),集产品、技术、方法论于一体,一站式地为您提供集数据引入、规范定义、智能建模研发、数据萃取、数据资产管理、数据服务等的全链路智能数据构建及管理服务。助您打造属于自己的标准统一、资产化、服务化和闭环自优化的智能数据体系,驱动创新。
支持将Dataphin的逻辑表和物理表配置为可直接调用的Dataphin数据源,并提供标准的JDBC接口,打通逻辑表消费渠道,简化资产消费链路.数据服务作为统一的数据服务出口,实现了API的统一化管理,有效地降低数据开放门槛的同时,保障数据开放的安全.适合业务相对稳定,且有小型的数据团队负责数据研发及管理的企业。此版本具备...
来自: 云产品
数据管理与服务
数据管理与服务作为阿里云产品六大版块之一,面向不同业务场景,阿里云提供数据存储、分析、应用等全链路能力,满足企业客户全方位的数据处理需求,实现计算和存储分离、资源解耦、数据移动减化,用以满足行业快速发展的需求和趋势,利用数据重塑其业务。
阿里云开源大数据产品矩阵再升级.2022云栖大会上,阿里云资深产品专家分享基于强大的大数据AI一体化的平台能力,从工具层面介绍DataWorks端到端的全链路数据开发治理平台新能力,回归工具为人服务的本质,全方位地提升一线数据开发人员/业务人员的工作效率.DataWorks全链路数据治理年度发布.伴随着用户业务的快速增长,数据...
来自: 云产品
新版产品集合页
基于丰富的产品,将计算、存储、网络、数据库、大数据、人工智能等最新产品技术与场景深度融合,为开发者打造稳定可靠的云基础设施以及云原生的开发环境。
数据开发与服务大数据开发治理平台 DataWorks免费试用DataWorks 基于 MaxCompute/EMR/MC-Hologres 等大数据计算引擎,为客户提供专业高效、安全可靠的一站式大数据开发与治理平台。数据总线 DataHub提供流式数据的发布和订阅功能,让您可以轻松构建基于流式数据的分析和应用。数据集成 Data Integration安全、低成本、稳定...
来自: 云产品
金融智能数仓解决方案
金融智能数仓解决方案是阿里云自研高性能、海量可扩展数据仓库服务、兼容部分 Oracle/Teradata 语法生态,大量应用于阿里巴巴集团内部电商,物流,文娱,广告等业务部门,服务于阿里云的金融、政企、互联网等各行业用户,支持快速构建新一代云化数据仓库服务。
兼容 Greenplum/PostgreSQL 数据库产品生态,可集成数据智能与构建 Dataphin数据管理 DMS、数据传输 DTS、数据报表 QuikBI 等云产品,同时支持第三方数据开发管理、ETL、BI 报表等工具,满足用户多种业务需求.结合阿里巴巴多年内部应用和数据库的迁移经验,自主研发的应用和数据迁移评估工具 ADAM,能帮助用户最大限度...
来自: 解决方案
全域采集与增长分析Quick Tracking
全域采集与增长分析(Quick Tracking)是阿里云推出的应用数据采集及分析产品,为运营、BI、产品和决策层提供一站式数据化运营服务:通用的多维度用户行为分析、自助分析功能、数据无缝对接其他大数据产品,助每个企业实现基于大数据技术的精细化运营能力。
智能数据构建与管理 Dataphin.在实现高效、精确、实时的移动推送的同时,极大地降低了App开发成本.适用于年采集日志量低于100亿的客户,无需自购服务器,灵活支付和高度可靠,明细日志数据需通过日志返回服务获取.Qucik Tracking Saas版.适用于对数据安全性要求高或年数据量较大的客户,独享阿里云资源,可自主运维服务器...
来自: 云产品
API网关
API网关(API Gateway)是阿里云公司出品的高性能API托管服务,帮助用户对其API进行管理,快速构建以API为核心的技术架构,满足系统集成、开放平台、数据中台等场景。
可以与大数据产品(Dataworks、Dataphin)、数据库产品(DMS)等产品对接,为企业搭建统一的数据服务总线.支持AI能力输出.可以将PAI(机器学习平台)上的模型、算法,以API形态发布在API网关,供各个业务系统进行调用.支持数据大屏.可以在DataV(数据可视化产品)上直接调用API网关发布的API,实现数据的可视化展示.支持...
来自: 云产品
通过ES兼容接口方式使用Kibana访问SLS数据
通过ES兼容接口方式使用Kibana访问SLS<em>数据</em>
自建ELK日志系统的客户迁移到阿里云日志服务SLS后,对SLS查询分析语法不太熟悉的客户,可以继续沿用原有的查询分析习惯,在不改变使用方式习惯的情况下,通过Elasticsearch兼容接口的方式使用Kibana访问SLS。
通过ES兼容接口方式使用Kibana访问SLS数据最佳实践 业务架构 场景描述 日志服务SLS提供Elasticsearch兼容接口,支 持客户将日志采集到日志服务后,仍可以继续沿 用Elasticsearch的查询方案,即通过使用 Kibana访问日志服务的Elasticsearch兼容接 口,实现查询SLS数据。应用场景 自建ELK日志系统的客户迁移到阿里云日志服 务...
来自: 最佳实践 | 相关产品:云服务器ECS,容器服务 ACK,日志服务(SLS)
一站式快速开发多平台小程序
本方案使用阿里云多端低代码开发平台魔笔低代码快速搭建适配于多平台的小程序,帮助您提升开发效率、降低维护成本。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台方案导读通过小程序开发企业移动端入口小程序搭建方案对比方案介绍方案优势方案部署方案权益一站式快速开发多平台小程序本方案使用阿里云多端低代码开发平台魔笔低代码快速搭建适配于微信、支付宝等多平台的小程序,帮助您提升开发效率、...
来自: 解决方案
ECS 数据备份与保护
随着企业核心业务规模不断扩大,需要根据业务需求对生产环境中的关键数据进行定期备份。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台ECS 数据备份与保护方案介绍方案优势应用场景方案部署解决方案推荐ECS 数据备份与保护随着企业核心业务规模不断扩大,需要根据业务需求对生产环境中的关键数据进行定期备份,在发生误操作、病毒感染、或攻击等情况时,能够快速从已有的快照...
来自: 解决方案
无代理ECS数据备份与高效环境搭建
本方案是基于快照提供数据保护和环境搭建的解决方案。可以帮助您实现无代理且有效可靠的数据备份,同时还可以帮助您快速克隆部署开发测试环境。使用基于快照的备份不仅简单有效,在数据备份以及恢复中也能保证稳定可靠,同时基于快照的环境搭建,不仅可以免于从0到1搭建环境,还可以将环境、数据等全部打包克隆到新机器上。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台无代理ECS备份与高效环境搭建方案介绍方案优势应用场景方案部署解决方案推荐无代理ECS备份与高效环境搭建本方案是基于快照提供数据保护和环境搭建的解决方案,可以帮助您实现无代理且有效可靠的数据备份...
来自: 解决方案
基于DataWorks的大数据一站式开发数据治理
基于DataWorks的大数据一站式<em>开发</em>及<em>数据</em>治理
概述 基于Dataworks做大数据一站式开发,包含数据实时采集到kafka通过实时计算对数据进行ETL写入HDFS,使用Hive进行数据分析。通过Dataworks进行数据治理,数据地图查看数据信息和血缘关系,数据质量监控异常和报警。 适用场景  日志采集、处理及分析  日志使用Flink实时写入HDFS  日志数据实时ETL  日志HIVE分析  基于dataworks一站式开发  数据治理 方案优势  大数据一站式开发,完善的数据治理能力。  性能优越:高吞吐,高扩展性。  安全稳定:Exactly-Once,故障自动恢复,资源隔离。  简单易用:SQL语言,在线开发,全面支持UDX。  功能强大:支持SQL进行实时及离线数据清洗、数据分析、数据同步、异构数据源计算等Data Lake相关功能 ,以及各种流式及静态数据源关联查询。
创建 DataWorks项目 背景信息 本实践采用 DataWorks的 Stream Studio进行数据开发,DataWorks大数据一站式 平台可以和其他的业务流程统一管理,故推荐使用。在上文中,已经通过 CADT开 通了 DataWorks(需开通专业版),还需要创建相关项目:步骤1 登录 DataWorks管理控制台...
来自: 最佳实践 | 相关产品:块存储,云服务器ECS,E-MapReduce,DataWorks,实时计算,云速搭
云原生企业级数据
基于对象存储 OSS 构建的数据湖,可对接多种数据输入方式,存储任何规模的结构化、半结构化、非结构化数据,打破数据湖孤岛。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台云原生企业级数据湖方案介绍方案优势应用场景方案部署解决方案推荐云原生企业级数据湖基于对象存储 OSS 构建的数据湖,可对接多种数据输入方式,存储任何规模的结构化、半结构化、非结构化数据,打破数据湖孤岛。无缝对接多种数据分析产品...
来自: 解决方案
车辆数据安全稳定上云和分析
阿里云物联网平台提供全托管的企业级实例服务,无需自建物联网基础设施即可实现车辆数据的安全稳定上云。
03车辆数据上云进行配置和开发,将车辆数据采集上云。04车辆数据分析使用数据服务,对车辆上报的数据进行分析。05完成及清理操作完成,删除或释放不再需要的资源。方案部署解决方案推荐海量共享设备安全高效运维针对设备规模大、地理分布广泛、业务实时性要求高的共享设备,提供安全高效的设备管理运维。本方案基于阿里云...
来自: 解决方案
企业级云灾备与数据管理
本方案以备份 ECS 文件为例,介绍如何部署一个简单的云灾备环境,以满足常见的数据保护需求。
数据通过备份在出现丢失或者损坏时能够很快恢复,因行规安全要求海量历史冷数据需要长时间保留十年甚至更长,通过策略化归档低成本长期存储。方案部署01部署准备开通云备份、ECS,部署 ECS,并确定需要备份的 ECS 文件目录。02 创建备份计划创建备份计划,包括新建备份库来存放备份数据,同时确定备份库的加密方式和...
来自: 解决方案
多媒体数据存储与分发
以搭建一个多媒体数据存储与分发服务为例,搭建一个多媒体数据存储与分发服务。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台多媒体数据存储与分发方案介绍方案优势应用场景方案部署解决方案推荐多媒体数据存储与分发视频、图文类多媒体数据量快速增长,内容不断丰富,多媒体数据存储与分发解决方案融合对象存储 OSS、内容分发 CDN、智能媒体管理 IMM 等产品能力,...
来自: 解决方案
应用日志数据归档
为企业提供云上日志数据的存储成本优化,提供了访问日志数据采集、自动压缩、持久化存储,满足企业的网站访问日志数据的归档需求。
相关产品云服务器 ECS日志服务 SLS对象存储 OSS专有网络 VPC在线咨询方案优势大规模采集支持高吞吐量的日志数据采集,每秒可达百万条日志数据,可满足大规模应用的日志采集需求。自动化压缩提供自动化压缩功能,可对采集到的日志数据进行压缩处理,减少存储空间占用,节省存储资源。持久化存储支持将日志数据归档到对象...
来自: 解决方案
物联网平台设备数据上云
物联网平台设备数据上云方案为企业提供海量物联网设备的数据接入与处理。提供了多种类型设备的稳定接入、安全防护、实时监控,满足企业一站式管理设备、处理数据的需求。具有高可用、高并发、低成本的优势。
产品解决方案文档与社区权益中心定价云市场合作伙伴支持与服务了解阿里云备案控制台物联网平台设备数据上云方案介绍方案优势应用场景方案部署解决方案推荐物联网平台设备数据上云物联网平台设备数据上云方案为企业提供海量物联网设备的数据接入与处理。提供了多种类型设备的稳定接入、安全防护、实时监控,满足企业一站式...
来自: 解决方案
数据资源平台
阿里云数据资源平台是构建数据智能的全流程平台,提供数据汇聚、数据加工与治理、数据分析、资产管理和统一服务等功能,帮助金融、政府及企业客户实现数据资源管理,潜在规律挖掘,业务决策优化。
数据开发-调度配置与上线节点任务.数据开发-查看运维信息.视频跳转链接.满足企业多角色分工协作,支持权限管理、访问控制、版本控制与协同编辑.面向企业多种角色.支持CPU/GPU/NPU多种计算节点,满足产业应用各类场景需求.连接多类型算力.提供异构计算引擎的统一操作界面,让用户专注业务逻辑设计.协同多态计算引擎.无代码...
来自: 云产品
数据集成 Data Integration
阿里云数据集成 Data Integration是跨异构数据、低成本、弹性扩展的数据采集同步平台,为DataX的商业版,支持ETL,支持50+数据源跨网络离线(全量/增量)同步。
数据开发与治理产品包.实时、离线一体化大数据平台建设,提供百亿数据亚秒级查询能力.数据加速分析产品包.查看全部日志.点击前往查看.数据集成(Data Integration)提供DataX不具备的实时同步能力,支持的输入、输出数据源如下,另外还支持两种数据转换及ETL能力,详细使用方法参见帮助文档.实时同步支持的数据源.了解数据...
来自: 云产品
数据湖-在线学习场景数据分析
<em>数据</em>湖-在线学习场景<em>数据</em>分析
场景描述 本场景以在线教育中一个答题闯关类的应用为 例,使用WebServer来模拟演示这类日志数据 的分析处理。通过Nginx和Pythonflask搭建 WebServer,模拟应用中的关键页面,比如登 录、课程内容等,之后构造若干用户使用的模拟 日志数据,投递到数据湖进行分析后获取应用 PV、UV、课程内容访问排行、平均得分等等。 解决问题 基于数据湖(EMR+OSS)搭建大数据平台。 EMR和OSS使用和配置。 数据统一存储到OSS。 产品列表 E-MapReduce 对象存储OSS 云服务器ECS 访问控制RAM 专有网络VPC
步骤1 打开EMR控制台,进入数据开发。步骤2 创建第一个作业任务:1-AddPartition 文档版本:20200331 53数据湖-在线学习场景数据分析 应用场景 输入Hive代码:1-AddPartition USEjindofs_db;ALTERTABLEapp1_logADDPARTITION(ds='${dy_date}');步骤3 作业设置,设置失败策略、运行资源、参数等,参数dy_date设置为前一天的...
来自: 最佳实践 | 相关产品:专有网络 VPC,云服务器ECS,对象存储 OSS,访问控制,E-MapReduce
< 1 2 3 4 5 >
共有5页 跳转至: GO
产品推荐
这些文档可能帮助您

新品推荐

切换为电脑版

新人特惠 爆款特惠 最新活动 免费试用