使用emapreduce
首页
博客
论坛
聚能聊
问答
直播
活动
主题
登录账号
注册账号
阿里云
>
云栖社区
>
主题地图
>
S
>
使用emapreduce
全部
博客
问答
免费套餐
上云实践机会
校园扶持
助力学生成长
API服务
覆盖海量行业
使用emapreduce 相关的博客
E-MapReduce助力建设企业级数据仓库
概述 对于大部分的企业,数据一般存在两个地方,一个是业务数据库,一个是日志。一般来讲,数据库数据容量有限,对于历史标记删除的记录一般会做定时清理,但是这些数据往往还是很有价值的。数据库计算能力也有限,如果要做一些数据分析,则会浪费宝贵的计算资源。 一些数据分
hbase小能手
6年前
1052
E-MapReduce支持计算与存储分离,成本下降1倍
Hadoop一出生就是存储与计算在一起的,前几年面试题中都问,Hadoop怎么保证高性能呢?其中一个原因是存储不动,计算(code)动,不同于传统的集中式的存储模式。那我们为什么还要谈存储计算分离呢?众观历史,分久必合、合久必分,在计算机历史中也很类似,如今
hbase小能手
6年前
1618
20160808北京云栖大会workshop-EMapReduce分析网站数据
E-MapReduce钉钉群 目标 了解E-MapReduce创建集群流程; 熟悉端口转发访问集群可视化组件zeppelin; 完成用zeppelin分析热播数据的示例。 创建集群 集群包括一组ecs实例和运行在实例上的分布式计算框架(Hadoop,Spar
鸿初
8年前
2912
使用 E-MapReduce 构建云上数据胡
原视频链接:https://www.slidestalk.com/AliSpark/EMapReduce191196?video 编辑:杨仲鲍,大数据爱好者,Spark 中文社区志愿者 首先介绍一下阿里云飞天大数据平台(简称飞天平台),飞天平台由AI-PAI
阿里云E-MapReduce团队
4年前
0
使用Spark SQL进行流式机器学习计算(上)
作者:余根茂,阿里巴巴计算平台事业部EMR团队的技术专家,参与了Hadoop,Spark,Kafka等开源项目的研发工作。目前主要专注于EMR流式计算产品的研发工作。 今天来和大家聊一下如何使用Spark SQL进行流式数据的机器学习处理。本文主要分为以下几
阿里云E-MapReduce团队
5年前
2415
使用Spark Streaming SQL进行PV/UV统计
1.背景介绍 PV/UV统计是流式分析一个常见的场景。通过PV可以对访问的网站做流量或热点分析,例如广告主可以通过PV值预估投放广告网页所带来的流量以及广告收入。另外一些场景需要对访问的用户作分析,比如分析用户的网页点击行为,此时就需要对UV做统计。 使用S
light-rain
5年前
4432
使用Spark Streaming SQL进行PV/UV统计
作者:关文选,花名云魄,阿里云E-MapReduce 高级开发工程师,专注于流式计算,Spark Contributor 1.背景介绍 PV/UV统计是流式分析一个常见的场景。通过PV可以对访问的网站做流量或热点分析,例如广告主可以通过PV值预估投放广告网页
开源大数据EMR
5年前
1929
使用Spark Streaming SQL基于时间窗口进行数据统计
1.背景介绍 流式计算一个很常见的场景是基于事件时间进行处理,常用于检测、监控、根据时间进行统计等系统中。比如埋点日志中每条日志记录了埋点处操作的时间,或者业务系统中记录了用户操作时间,用于统计各种操作处理的频率等,或者根据规则匹配,进行异常行为检测或监控系
light-rain
5年前
6028
使用emapreduce 相关的问答
使用emapreduce集群,怎么访问公网呢?包括计费等能详细解析下吗?
使用emapreduce集群,怎么访问公网呢?包括计费等能详细解析下吗?
封神
8年前
998
我使用emapreduce hadoop jar依赖的jar怎么上传
我使用emapreduce hadoop jar依赖的jar怎么上传
封神
8年前
1420
我再使用emapreduce,hive脚本中的变量参数传递
我在hive怎么传递参数呢?
封神
8年前
1285
使用emapreduce时,提交的hadoop yarn的job,JOB状态一直是ACCEPTED状态
提交的yarn的job,JOB状态一直是ACCEPTED状态 如下图所示: ![1](https://oss.aliyuncs.com/yqfiles/c3fa4809ae7056340d224bb053dd3590e55bf264.jpeg)
封神
8年前
3363
在使用emapreduce跑mr的时候,输出7个文件,怎么才能输出一个文件呢?
我用hadoop集群,正常运行后,在输出结构的时候,总是有0-6,一共7个文件,这样,我难以在一个文件中获得结果,如何设置?让集群输出是一个文件呢?
封神
8年前
1153
可以不通过emapreduce的管理平台使用oss存储服务吗?因为公司有一个账号但不能给我,我只能通过ssh访问给我创建的集群
可以不通过emapreduce的管理平台使用oss存储服务吗?因为公司有一个账号但不能给我,我只能通过ssh访问给我创建的集群
封神
8年前
1073
emapreduce集群如何为python安装package
我先为python安装numpy这个package 在本地的集群中为python安装package是使用命令:‘pip install numpy’ 请问在阿里云的emapreduce集群中如何安装?在python2.6文件夹下没有找到pip这个程序。
m31
7年前
1089
运行hadoop 程序,hadoop相关的jar包在创建作业的时候需要指定么。还是系统运行时默认会找到某个目录,已经在框架里面了
在使用emapreduce时,运行hadoop 程序,hadoop相关的jar包在创建作业的时候需要指定么。还是系统运行时默认会找到某个目录,已经在框架里面了
封神
8年前
1024
相关主题
emapreduce
免费emapreduce
使用
使用
域名使用
镜像使用
使用教程
使用心得
怎么使用
短信使用
药品使用
药品使用
svn 使用
怎么使用域名
linux 使用
centos使用
ubuntu使用
postgres 使用
hbase 使用
drupal 使用
alfresco使用
使用drupal
moodle使用
drds使用
linux使用
centos 使用
使用方法
数据怎么使用
如何使用教程
shopex使用
wnmp使用
个人如何使用
个人使用教程
2003系统使用
oss使用
使用465端口
怎么使用镜像
使用obs
使用量
oss使用
写emapreduce动态
到rdd动态
写rdd动态
到emapreduce
写maxcompute数据
写maxcompute动态
到emapreduce动态
到emapreduce数据
到emapreduce区
写emapreduce