流式
首页
博客
论坛
聚能聊
问答
直播
活动
主题
登录账号
注册账号
阿里云
>
云栖社区
>
主题地图
>
L
>
流式
全部
博客
问答
免费套餐
上云实践机会
校园扶持
助力学生成长
API服务
覆盖海量行业
流式 相关的博客
流式计算
从spark 说起,谈谈“流式”计算的理解 spark是一个大数据分布式的计算框架,有一些并行计算的基础会更容易理解分布式计算框架的概念。对比并行计算,谈三个概念: 并行计算 Map Reduce 算子 RDD数据结构 并行计算 spark的任务分为1个dr
白头雁
5年前
951
小米流式平台架构演进与实践
作者:夏军@小米 小米业务线众多,从信息流,电商,广告到金融等覆盖了众多领域,小米流式平台为小米集团各业务提供一体化的流式数据解决方案,主要包括数据采集,数据集成和流式计算三个模块。目前每天数据量达到 1.2 万亿条,实时同步任务 1.5 万,实时计算的数据
阿里云实时计算Flink
4年前
1684
探寻流式计算
一、静态数据和流数据 静态数据:为了支持决策分析而构建的数据仓库系统,其中存放的大量历史数据就是静态数据。 流数据:以大量、快速、时变的流形式持续到达的数据。(例如:实时产生的日志、用户实时交易信息) 流数据具有以下特点: (1)、数据快速持续到达,潜在大小
宜信技术学院
4年前
4954
现代流式计算的基石:Google DataFlow
0. 引言 今天这篇继续讲流式计算。毫无疑问,Apache Flink 和 Apache Spark (Structured Streaming)现在是实时流计算领域的两个最火热的话题了。那么为什么要介绍 Google Dataflow 呢?***Strea
尼不要逗了
5年前
16560
双11数据大屏背后的秘密:大规模流式增量计算及应用
更多精彩内容参见云栖社区大数据频道https://yq.aliyun.com/big-data;此外,通过Maxcompute及其配套产品,低廉的大数据分析仅需几步,详情访问https://www.aliyun.com/product/odps。 摘要:回顾大
场景研读
7年前
6784
双11数据大屏背后:大规模流式增量计算及应用(附资料)
首先从理解什么是数据流开始今天的分享,其实在真实的世界中,大部分的数据都是连续产生的数据流,比如手机上产生的GPS信号、用户在互联网上的行为、在线搜索、用户的点击、社交网络分享、即时通信以及一些传感器和物联网设备采集的日志信息等,这些数据都是连续产生的,自然
小旋风柴进
6年前
1756
StreamingPro支持Flink的流式计算了
前言 有的时候我们只要按条处理,追求实时性而非吞吐量的时候,类似Storm的模式就比较好了。Spark 在流式处理一直缺乏改进,而Flink在流式方面做得很棒,两者高层的API也是互相借鉴,容易形成统一的感官,所以决定让StreamingPro适配Flink,
祝威廉
7年前
1560
流式计算 galaxy & 实时多维分析 garuda
流式计算 galaxy & 实时多维分析 garuda galaxyproject.org
cnbird
10年前
836
流式 相关的问答
Java 日志服务如何使用流式计算消费?
需求说明:需要记录用户访问时间,url,请求参数,用户id,来定时更新用户的最近访问时间(DB中) 使用Java SDK实现了日志服务的实时采集,如何通过流式计算来消费? 具体:spark streaming与streamCompute消费的区别?流式消费
gsy_yang
6年前
1607
Aapche flink:PythonAPI实现流式计算无法引入三方模块
想利用flink提供的PythonAPI实现流式计算,碰到下面无法导入三方包的问题. 通过flink安装包提供的shell命令执行Python脚本无法引用三方模块 ,但通过Python命令进入可以引入kafka模块 ./bin/pyflink-stre
bamboo先生
5年前
1275
关于流式计算
请问阿里用的流式计算 框架是storm吗
xiaoyu998
7年前
2059
[@墨玖tao][¥20]为什么流式处理框架都是 java 写成的,JVM 是不是在流和批存在着特殊优势。还有分布式资源调度,感觉Mesos 的成长速度跟不上 Yarn。这是为什么?
为什么流式处理框架都是 java 写成的,JVM 是不是在流和批存在着特殊优势。还有分布式资源调度,感觉Mesos 的成长速度跟不上 Yarn。这是为什么?
管理贝贝
5年前
19960
Blink 是不是主要是流式SQL 呢!昨天大概听了个课程
转自钉钉群21789141:blink 是不是主要是流式SQL 呢!昨天大概听了个课程
赵慧@ApacheFlink中文社区
5年前
663
使用apache flink从google pub / sub流式传输
我花了大约几个小时来找到一种使用apache-flink从google pub / sub流式传输的方法。apache-flink是否支持从google pub / sub流式传输?如果是的话,我该怎么做?
社区小助手
5年前
267
流式SQL目前有规范吗?一直在用KSQL,没觉得Flink目前在这块比KSQL有什么优势。
转自钉钉群21789141:流式SQL目前有规范吗?一直在用KSQL,没觉得Flink目前在这块比KSQL有什么优势。
赵慧@ApacheFlink中文社区
5年前
597
Spark从本地文件流式传输到hdfs。textFileStream
我正在尝试将本地目录内容流式传输到HDFS。脚本将修改此本地目录,并且每5秒添加一次内容。我的spark程序将流式传输本地目录内容并将其保存到HDFS。但是,当我开始流式传输时,没有任何事情发生。我检查了日志,但我没有得到提示。 让我解释一下这个场景。s
社区小助手
5年前
756
相关主题
流式存储
什么是流式计算
大数据流式计算
流式细胞术数据分析
Openads
plc tcp编程
纵向
4000byte
populate
Farpoint
电话拨号器
nl2br()
sprintf_s
faster rcnn
gtk库文件linux
mod_jk
FileSystemWatcher
controller通信
radio button
卸载详解
c listview 分页显示
zoj
Ajax运用
经历
java类中的main方法
中文首字母
Buffer模块
resetForm
Gate
答题
jquery选择器空格
微软NET
美化select
mvvmlight
sql盲注
jquery遍历checkbox
从中
RestAPI消息导出
sdcard图片存储
onstartcommand
words
反恐精英
l2tp
单片机 c编程
videocapture
阻止按钮提交
pat实验
cakephp2
SelectedValue
phpmysql