StreamingPro

阿里云 > 云栖社区> 主题地图> S> StreamingPro

StreamingPro 相关的博客

StreamingPro使用教程

准备工作 下载Spark 1.6.2 下载StreamingPro 我们假设你下载的StreamingPro包在/tmp目录下。 复制如下模板 { "esToCsv": { "desc": "测试", "strategy": "streaming.core.s
祝威廉 8年前 3413

StreamingPro

Declarative workflows for building Spark Streaming Spark Streaming Spark Streaming is an extension of the core Spark API that enab
祝威廉 8年前 1957

StreamingPro 再次支持 Structured Streaming

前言 之前已经写过一篇文章，StreamingPro 支持Spark Structured Streaming，不过当时只是玩票性质的，因为对Spark 2.0+ 版本其实也只是尝试性质的,重点还是放在了spark 1.6 系列的。不过时间在推移，Spark
祝威廉 7年前 2794

StreamingPro 简化流式计算配置

前言 前些天可以让批处理的配置变得更优雅StreamingPro 支持多输入，多输出配置，现在流式计算也支持相同的配置方式了。 另外未来等另外一个项目稳定，会释放出来配合StreamingPro使用，它可以让你很方便的读写HBase,比如可以为HBase 表
祝威廉 7年前 1736

StreamingPro 支持Spark Structured Streaming

前言 Structured Streaming 的文章参考这里： Spark 2.0 Structured Streaming 分析。2.0的时候只是把架子搭建起来了，当时也只支持FileSource(监控目录增量文件)，到2.0.2后支持Kafka了，也就进
祝威廉 7年前 1588

StreamingPro支持Flink的流式计算了

前言 有的时候我们只要按条处理，追求实时性而非吞吐量的时候，类似Storm的模式就比较好了。Spark 在流式处理一直缺乏改进，而Flink在流式方面做得很棒，两者高层的API也是互相借鉴，容易形成统一的感官，所以决定让StreamingPro适配Flink,
祝威廉 7年前 1560

StreamingPro添加Scala script 模块支持

SQL 在解析字符串方面，能力还是有限，因为支持的算子譬如substring,split等有限，且不具备复杂的流程表达能力。我们内部有个通过JSON描述的DSL引擎方便配置化解析，然而也有一定的学习时间成本。 我们当然可以通过SQL的 UDF函数等来完成字符串
祝威廉 7年前 1921

使用StreamingPro 快速构建Spark SQL on CarbonData

前言 CarbonData已经发布了1.0版本，变更还是很快的，这个版本已经移除了kettle了，使得部署和使用 变得很简单，而且支持1.6+ ,2.0+等多个Spark版本。 StreamingPro可以使得你很简单通过一个命令就能体验Carbondata,
祝威廉 7年前 4554

相关主题

购物车动画 CLR功能 最长递增 DisplayMetrics ubuntu10 nodejs机制 uitableview顶部空白 qtwidget findnextfile Perl语言入门 inode appcan自动更新 风筝 Screens 比特率 tomcat映射虚拟目录 faint ObjectOutputStream tomcat项目中断 Attribution mysql5548 T_sql语句 学编程 clearFocus View随机验证码 打开闪光灯 Action跳转 datagrid? majorminor 浅谈正则表达式 Android图片崩溃 NTFS还是FAT nobody linux_du文件夹大小 onpropertychange 卫星 gravatar头像 iOS皮肤切换 Management treeview 节点 android 求职 存储c 提示ora 02095 netcdf php中的登陆login Rmagick 管理员帐号 密码 android studio bootstrap分页 始终