大数据 hadoop hive

阿里云 > 云栖社区> 主题地图> D> 大数据 hadoop hive

大数据 hadoop hive 相关的博客

Hadoop Hive概念学习系列之HiveQL编译基础（十）

　由客户端提交的HiveQL语句将最终被转换为一个或多个MapReduce任务并提交由Hadoop执行。不包含聚合和连接的简单SELECT语句可以使用一个单独的只包含Map阶段的任务实现。使用GROUP BY子句的聚合可以使用一个独立的MapReduce任务实
技术小哥哥 7年前 876

Hadoop Hive概念学习系列之HiveQL编译基础（十）

　由客户端提交的HiveQL语句将最终被转换为一个或多个MapReduce任务并提交由Hadoop执行。不包含聚合和连接的简单SELECT语句可以使用一个单独的只包含Map阶段的任务实现。使用GROUP BY子句的聚合可以使用一个独立的MapReduce任务实
技术小哥哥 7年前 734

Hadoop Hive迁移至MaxCompute

本文向您详细介绍如何将 Hadoop Hive 数据迁移到阿里云MaxCompute大数据计算服务上。 一、环境准备 1.1、Hadoop集群环境 在进行 Hadoop Hive 数据迁移前，您需要保证自己的Hadoop集群环境正常。本文使用的Hadoop环
四相 5年前 2592

Hadoop Hive

一、Hive： 1、定义： Hive是建立在 Hadoop 上的数据仓库基础构架。它提供了一系列的工具，可以用来进行数据提取转化加载（ETL），这是一种可以存储、查询和分析存储在 Hadoop 中的大规模数据的机制。Hive 定义了简单的类 SQL 查询语言，
技术小甜 7年前 832

Hadoop Hive概念学习系列之hive里的桶（十一）

Hive还可以把表或分区，组织成桶。将表或分区组织成桶有以下几个目的： 　　第一个目的是为看取样更高效，因为在处理大规模的数据集时，在开发、测试阶段将所有的数据全部处理一遍可能不太现实，这时取样就必不可少。 　　第二个目的是为了获得更好的查询处理效率。 　　
技术小哥哥 7年前 776

Hadoop Hive概念学习系列之hive里的用户定义函数UDF（十七）

　Hive可以通过实现用户定义函数（User-Defined Functions，UDF）进行扩展（事实上，大多数Hive功能都是通过扩展UDF实现的）。想要开发UDF程序，需要继承org.apache.hadoop.ql.exec.UDF类，并重载evalu
技术小哥哥 7年前 911

Hadoop Hive概念学习系列之hive里的用户定义函数UDF（十七）

　Hive可以通过实现用户定义函数（User-Defined Functions，UDF）进行扩展（事实上，大多数Hive功能都是通过扩展UDF实现的）。想要开发UDF程序，需要继承org.apache.hadoop.ql.exec.UDF类，并重载evalu
技术小哥哥 7年前 840

Hadoop Hive概念学习系列之hive里的索引（十三）

Hive支持索引，但是Hive的索引与关系型数据库中的索引并不相同，比如，Hive不支持主键或者外键。 Hive索引可以建立在表中的某些列上，以提升一些操作的效率，例如减少MapReduce任务中需要读取的数据块的数量。 在可以预见到分区数据非常庞大的情况下
技术小哥哥 7年前 984

大数据 hadoop hive 相关的问答

大数据职业如何规划

Java转过来做大数据，Java做过前后端。大数据目前用过的技术，Hadoop spark_mllib spark_streaming kafka flume hbase hive docker solrCloud OSGI oozie 。除了买书
sunt_dota 7年前 1481

hive on tez 设置后报错【java.lang.NoClassDefFoundError: org/apache/tez/serviceplugins/api/TaskScheduler】

hive 用2.0.1版本， Tez0.6.0 版本， set为tez后报错 java.lang.NoClassDefFoundError: org/apache/tez/serviceplugins/api/TaskScheduler at jav
alanpan 7年前 1869

CDH5环境下，如何将HIVE表建立在OSS文件系统之上

我目前使用的是CDH5的环境，hadoop版本为2.6.0，HIVE版本为1.2.0，请问可以使用hive在oss上建立外部分区表吗，需要如何引入jar包呢？ 我下载了最新的hadoop3.0.0中，hadoop-tools中的AliyunOSS的jar，并
vitoliao 7年前 916

企业大数据平台仓库架构建设思路【精品问答集锦】

本期请来了阿里云高级技术专家李金波（介然）直播分享企业大数据平台仓库架构建设思路 直播简介 随着互联网规模不断的扩大，数据也在爆炸式地增长，各种结构化、半结构化、非结构化数据的产生，越来越多的企业开始在大数据平台下进行数据处理。作为大数据应用的基础-数
管理贝贝 8年前 54788

Kylin无法更新coprocessor

Kylin创建好cube后执行查询语句报错如下： ```org.apache.hadoop.hbase.exceptions.UnknownProtocolException: org.apache.hadoop.hbase.exceptions.Unkno
mz111 5年前 298

Spark 【问答合集】

如何使用spark将kafka主题中的writeStream数据写入hdfs？ https://yq.aliyun.com/ask/493211 当Spark在S3上读取大数据集时，在“停机时间”期间发生了什么？ https://yq.aliyun.co
社区小助手 5年前 533

scala编译的时候报错unclosed character literal

求老师来解答： scala编译的时候报错regexp_replace(regexp_replace(regexp_replace(p_parameters,'""','"'),'\\"\\{','{'),'}"','}') as p_parameter
数据boy 6年前 843

相关主题

hadoop/hive hive hbase hadoop hbase hive hadoop hadoop hive hbase hadoop hive pig hive 删除数据 hive 更新数据 hive加载数据 hive导入数据 hive 数据存储 hive 数据类型 hive 删除表数据 hive清空表数据 hive删除分区数据 hive 数据清洗方案 大数据hadoop hadoop大数据 hadoop 大数据 大数据hadoop hive元数据存储 hive 导出数据到本地 hive复杂数据类型 spark读取hive数据 hadoop 存储数据 hadoop 大数据处理 hadoop 大数据平台 hadoop和大数据 大数据etl hadoop hadoop 数据分析 hadoop数据存储 hadoop 数据仓库 hadoop数据挖掘 hadoop数据仓库 hadoop数据库 hadoop海量数据处理 hadoop数据分析平台 hadoop 大数据分析 云数据库hbase版和hive hive hbase Hadoop数据库 网站跳转支付宝支付宝支付宝支付宝支付 流体网站设计 oracle数据库oem sql 语句创建数据库 网站竞品分析 php短信接口参数 现场总线工业控制网络技术 h3c 视频监控 阿里云 hadoop集群 xp系统本地连接网络地址