云计算的大数据

_相关内容

客户案例

MaxCompute已被广泛应用于各领域处理大数据,帮助众多企业解决了海量数据分析问题,同时降低企业运维成本,企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息,请参见 行业客户案例...

应用场景

云数据库MongoDB版支持单节点、副本集和分片集群三种部署架构,具备安全审计、时间点备份等多项企业能力。在互联网、物联网、游戏、金融等...大数据应用:使用云数据库MongoDB作为大数据存储系统,随时进行数据提取分析,掌握行业动态。

外部表概述

随着大数据业务的不断扩展,新的数据使用场景在不断产生,MaxCompute计算框架也在不断演化。MaxCompute原来主要面对内部特殊格式数据的强大计算能力,正一步步地开放给不同的外部数据。现阶段MaxCompute SQL处理的主要是以 cfile 列格式...

什么是物联网边缘计算

同时,物联网边缘计算可以结合阿里大数据、AI学习、语音、视频 等能力,打造出云边端三位一体的计算体系。视频介绍 物联网边缘计算的核心功能如下:边缘实例 边缘实例提供一种类似文件夹的管理功能,您可以通过实例的方式管理边缘端...

功能简介

数据查询为用户提供对云计算资源中物理表基本情况的概览能力,帮助用户直观了解物理表基础信息、字段内容分布等情况,建立对数据表的宏观理解,为建立数据标准、定义数据模型、定义数据加工逻辑等工作提供基础依据。数据导入 支持512 MB...

2023年

2023年12月28日-MaxCompute升级公共Endpoint 尊敬的MaxCompute用户:感谢您对原生大数据计算服务MaxCompute的支持,MaxCompute将于北京时间2024年1月4日对华北2(北京)、华东2(上海)、华东1(杭州)、华南1(深圳)、华北3(张家口...

公告

此功能对应MaxCompute管理控制台的 配额(Quota)管理,配额(Quota)管理 已经全部覆盖原有能力,同时还支持了预留弹性能力,支持数据传输独享Quota的管理等,交互体验上也有了很大的提升,详情请参见 项目管理(新版)。作业运维:运维...

通过云计算资源导入逻辑表

您可以将已存在数据库中的数据表,通过云计算资源扫描方式,导入 企业数据智能平台 系统,实现逆向创建逻辑表。本文介绍如何通过云计算资源扫描方式创建逻辑表。前提条件 已添加工作组,具体操作,请参见 新建工作组。已新建目录,具体操作...

导入数据

前提条件 已新建导入数据所需的云计算资源,具体操作,请参见 新建云计算资源。说明 支持进行数据导入的云计算资源有:RDS MySQL、MaxCompute、AnalyticDB PostgreSQL、AnalyticDB MySQL 3.0、PostgreSQL。操作步骤 登录企业数据智能平台。...

新建工作组

后续操作 通过添加云计算资源,为使用 企业数据智能平台 做数据支撑。以RDS MySQL资源为例,更多信息,请参见 新建云计算资源。通过成员管理功能,对工作组实现账号和角色权限控制。更多信息,请参见 工作组成员管理。通过全局变量功能,可...

什么是数据库HBase

云数据库HBase是低成本、高扩展、智能的大数据NoSQL,兼容标准HBase访问协议,提供低成本存储、高扩展吞吐、智能数据处理等核心能力,是为淘宝推荐、花呗风控、广告投放、监控大屏、菜鸟物流轨迹、支付宝账单、手淘消息等众多阿里巴巴...

消息队列 Kafka 版的数据迁移至MaxCompute

本文介绍如何使用DataWorks数据同步功能,将 消息队列 Kafka 版 集群上的数据迁移至阿里云大数据计算服务MaxCompute,方便您对离线数据进行分析加工。前提条件 在开始本教程前,确保您在同一地域中已完成以下操作:消息队列 Kafka 版 ...

云计算资源类型

云计算资源是 数据资源平台 中数据标准字段使用的基础,通过了解数据标准支持的云计算资源类型,并在系统设置模块添加数据标准需要使用的云计算资源类型对应资源,以备在物理化质量校验函数和物理化数据字典时使用。本文介绍数据标准设计中...

云计算资源类型

数据服务API 数据服务API支持的云计算资源类型为:ApsaraDB for RDS、ApsaraDB for RDS VPC、AnalyticDB MySQL、AnalyticDB MySQL 2.0、AnalyticDB PostgreSQL、MaxCompute、DataHub、Table Store、Object Storage Service、RocketMQ、...

HDFS原生上云方案

Lindorm文件引擎 是面向海量非结构化数据的分布式文件存储服务,具有弹性、低成本的优势,提供100%的HDFS协议和使用体验,支持企业大数据中的HDFS无缝平滑上云,构建原生时代的存储计算分离的大数据架构。方案总览 方案优势 简单:...

云计算资源类型

云计算资源是 企业数据智能平台 中数据标准字段使用的基础,通过了解数据标准支持的云计算资源类型,并在系统设置模块添加数据标准需要使用的云计算资源类型对应资源,以备在物理化质量校验函数和物理化数据字典时使用。本文介绍数据标准...

云计算资源类型

云计算资源是 企业数据智能平台 中数据建模使用的基础,通过了解数据建模支持的云计算资源类型,并在系统设置模块添加数据建模需要使用的云计算资源类型对应资源,以备在物理化逻辑表和设置对应资源的质量规则时使用。本文介绍数据建模中...

云计算资源类型

了解数据查询支持的云计算资源类型,以便后续参考使用。本文介绍数据查询支持的云计算资源。目前支持的云计算资源类型:MaxCompute、RDS MySQL、PostgreSQL、AnalyticDB PostgreSQL、AnalyticDB MySQL 3.0、SQLServer、Oracle、Hive、...

授权信息

本文为您介绍 原生大数据计算服务 MaxCompute(MaxCompute)为RAM权限策略定义的操作(Action)、资源(Resource)和条件(Condition)。原生大数据计算服务 MaxCompute(MaxCompute)的RAM代码(RamCode)为 odps,支持的授权粒度为 ...

云计算资源类型

通过了解数据开发支持的云计算资源类型,并在系统设置模块添加数据开发需要使用的云计算资源类型对应资源,以备在运行离线节点或者部署运行测试场景和线上场景时使用。本文介绍数据开发中支持使用的云计算资源类型。节点模式 支持的云计算...

输入节点

运行配置 运行配置用于设置输入节点的云计算资源和源数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的数据源类型,可选值包括 MaxCompute、AnalyticDB for RDS、AnalyticDB MySQL、Table Store、DataHub Service、Phoenix、...

云计算资源类型

了解数据同步支持的云计算资源类型,以便后续参考使用。本文介绍数据同步支持的云计算资源。单表任务链路 目前系统支持的任务链路如下表所示。说明 对号(√)代表支持,其他则为不支持。目标端支持版本与源端一致。批量任务链路 目前系统...

大数据

推荐 大数据存储密集型实例规格族d3s 大数据计算密集型实例规格族d3c 大数据计算密集型实例规格族d2c 大数据存储密集型实例规格族d2s 大数据网络增强型实例规格族d1ne 其他在售(如果售罄,建议使用推荐规格族)大数据型实例规格族d1 ...

操作流程

数据服务API:数据API是一种由云计算资源中的数据通过参数配置生成API的API类型,生成API后可以方便后续调用,减少资源操作成本。上线API 通过上线API操作才能使API被调用。服务调用流程(工作组内)及说明 流程图 流程说明 流程 说明 API...

就绪检测节点

运行属性 运行属性 用于设置数据检测节点的云计算资源和所要检测的数据表,关键参数说明如下:参数 说明 云计算资源类型 节点的云计算资源类型。必须与下游节点的云计算资源类型相同。数据结构 数据模型指代您已经在云资源中创建的物理表。...

云计算资源类型

通过了解质量评估支持的云计算资源类型,并在系统设置模块添加质量评估需要使用的云计算资源类型对应资源,以备在运行质量检测计划时使用。本文介绍质量评估模块支持的云计算资源类型。质量规则 支持的云计算资源类型:MaxCompute Hive ...

操作流程

通过云计算资源 将已存在数据库中的数据表,通过云计算资源扫描方式,导入 企业数据智能平台 系统,实现逆向创建逻辑表。具体操作,请参见 通过云计算资源导入逻辑表。通过Excel导入 将Excel表里的逻辑表表名、字段信息、所属层级、关联...

基于Flink的资讯场景实时数仓

实时计算 实时计算(Alibaba Cloud Realtime Compute)是阿里提供的基于Apache Flink构建的企业级大数据计算平台。在PB级别的数据集上可以支持亚秒级别的处理延时,赋能用户标准实时数据处理流程和行业解决方案;支持Datastream API作业...

升级数据库版本

本文介绍云数据库MongoDB支持升级的数据版本以及如何升级数据版本。注意事项 升级分片集群实例的数据版本时,实例的协议类型需为 MongoDB协议。升级采用轮转升级的方式进行,升级过程中会自动对实例进行2~3次重启,请在业务低...

新建Spark Batch类型的公共节点

Spark Batch节点是离线节点,运行于Spark类型的云计算资源之上,可通过输入SQL语句处理Spark类型的数据源。本文介绍如何新建Spark Batch类型的公共节点。前提条件 已创建Spark On Yarn或者Spark Cluster类型的云计算资源,具体信息,请参见...

选择付费方式

对周期性高密度计算作业使用包年包月模式,对非周期性的规模数据处理作业使用按量计费模式。按量计费模式下可以不存储数据,通过读取其它账号下的表获取数据,从而可以节省数据存储费用。不同账号下跨表计算需要通过授权来实现,详细请...

什么是阿里实时计算Flink版

阿里实时计算Flink版是一套基于Apache Flink构建的⼀站式实时大数据分析平台,提供端到端亚秒级实时数据分析能力,并通过标准SQL降低业务开发门槛,助力企业向实时化、智能化大数据计算升级转型。产品概述 阿里实时计算Flink版是一种全...

物理化数据字典

通过物理化数据字典,可以将数据字典物理化到云计算资源生成物理表,保证设置的数据质量规则在云计算资源中生效。本文介绍如何物理化数据字典。前提条件 已创建或者导入数据字典,具体操作,请参见 新建数据字典 和 导入数据字典。已创建...

新建Flink SQL类型的公共节点

Flink SQL节点是流式节点,运行于Flink云计算资源之上,支持对ApsaraDB for RDS、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL和DataHub Service等类型的数据进行处理。本文介绍如何新建Flink SQL类型的公共节点。背景信息...

获取集群的VPC网段IP

数据从其他数据库导入 云数据库ClickHouse 时,需要将目标 云数据库ClickHouse 集群所在的VPC网段IP地址添加到源数据库的白名单中。本文介绍了如何获取 云数据库ClickHouse 集群所在的VPC网段IP地址。操作步骤 复制目标 云数据库...

新建Flink Vvp SQL类型的公共节点

Flink Vvp SQL节点是流式节点,运行于Flink云计算资源之上,支持对ApsaraDB for RDS、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL、AnalyticDB_PostgreSQL和DataHub Service等类型的数据进行处理。本文介绍如何新建Flink ...

数据分析整体趋势

存储计算分离:云计算的本质是资源高效池化,而数据库的两核心组件是存储和计算。通过存储计算分离,做到两者解耦,资源池化,独立扩展,满足业务上资源隔离,数据共享的需求,是当下的架构趋势。计算分析一体化:传统数据分析方案是定期...

开通MaxCompute和DataWorks

角色用途:用于授权MaxCompute访问大数据计算平台其他产品,如Hologres等。绑定的角色策略:AliyunServiceRolePolicyForMaxComputeIdentityMgmt 权限策略详情:{"Statement":[{"Effect":"Allow","Action":"odps:ActOnBehalfOfAUser",...

访问控制

IP白名单 云数据库MongoDB提供了IP白名单来实现网络安全访问控制,支持为每个云数据库MongoDB实例单独设置IP白名单。默认情况下,MongoDB实例被设置为不允许任何IP访问,即127.0.0.1。您可以使用以下任意一种方法添加IP白名单。通过控制台...

连接集群

云数据库ClickHouse 支持通过DMS(Data Management Service)、ClickHouse命令行工具或其它客户端(DataGrip、DBeaver)连接 云数据库ClickHouse 集群。本文介绍如何通过DMS连接 云数据库ClickHouse 集群。背景信息 DMS是阿里提供的图形...
< 1 2 3 4 ... 200 >
共有200页 跳转至: GO
新人特惠 爆款特惠 最新活动 免费试用