达摩院2020十大科技趋势发布:科技浪潮新十年序幕开启 | 1月2号云栖号夜读

yq传送门 2020-01-02

云栖社区 数据存储与数据库 大数据 空间索引原理 测试技术 开发框架与中间件 性能 日志 aliyun 磁盘 流计算 安全问道

点击订阅云栖夜读日刊,专业的技术干货,不容错过!

阿里专家原创好文

1.达摩院2020十大科技趋势发布:科技浪潮新十年序幕开启

回望2019年的科技领域,静水流深之下仍有暗潮涌动。AI芯片崛起、智能城市诞生、5G催生全新应用场景……达摩院去年预测的科技趋势一一变为现实。科技浪潮新十年开启,围绕AI、芯片、云计算、区块链、工业互联网、量子计算等领域,达摩院继续提出最新趋势,并断言多个领域将出现颠覆性技术突破。阅读更多》》

2.读懂这本书,才算读懂阿里大数据

根据以往双十一的经验,11月12日凌晨基线任务数据量大幅增加,shuffle过程会受到巨大的挑战,这通常也是造成当天基线延迟的主要原因,下面列出了传统磁盘shuffle的主要问题:碎片读:一个典型的2k*1k shuffle pipe在上游每个mapper处理256MB数据时,一个mapper写给一个reducer的数据量平均为256KB,而从HDD磁盘上一次读小于256KB这个级别的数据量是很不经济的,高iops低throughput严重影响作业性能。稳定性:由于HDD上严重的碎片读现象,造成reduce input阶段较高的出错比率,触发上游重跑生成shuffle数据更是让作业的执行时间成倍拉长。阅读更多》》

3.9张图总结一下阿里云的2019

一篇干货好文,值得一读!阅读更多》》

4.日志服务(SLS)集成 Spark 流计算实战

日志服务作为一站式的日志的采集与分析平台,提供了各种用户场景的日志采集能力,通过日志服务提供的各种与·与SDK,采集客户端(Logtail),Producer,用户可以非常容易的把各种数据源中的数据采集到日志服务的Logstore中。同时为了便于用户对日志进行处理,提供了各种支持流式消费的SDK,如各种语言的消费组,与 Spark,Flink,Storm 等各种流计算技术无缝对接的Connector,以便于用户根据自己的业务场景非常便捷的处理海量日志。阅读更多》》

5.IDE 听上去很美的 Serverless 在中国落地的怎么样了?

说起当前最火的技术,不得不提的一个概念就是 Serverless。2019 年几乎所有人都在说 Serverless,实际落地 Serverless 的有多少?Serverless 作为一种新型的互联网架构,直接或间接推动了云计算的发展,从 AWS Lambda 到阿里云函数计算,Serverless 一路高歌,同时基于 Serverless 的轻量计算开始登录云计算的舞台。阅读更多》》

视频课程及PPT下载

1.【【云吞铺子】性能抖动剖析(一)
《云吞铺子-故障排查案例精选》重磅上线!首期我们将聚焦系统类常见问题——性能抖动,阿里云高级技术专家江冉将分享多年故障排查心得体会与经典案例实战经验。完成学习,你就是明日技术大牛!
视频地址:https://yq.aliyun.com/live/1037

2.【云吞铺子】性能抖动剖析(二)
《云吞铺子-故障排查案例精选》第2集如约而至,阿里云高级技术专家江冉将继续剖析系统性能抖动的经典案例。技术+颜值,实力强到无法FU吸,速来围观!
视频地址:https://yq.aliyun.com/live/1038

3.【云吞铺子】性能抖动剖析(三)
《云吞铺子——故障排查案例精选》第3集更新啦!本期我们继续跟随阿里云高级技术专家江冉了解系统性能抖动的经典案例。也许,你和技术大牛之间只差一期云吞铺子!
视频地址:https://yq.aliyun.com/live/1078

更多精彩直播

往期精彩回顾

年度回顾 | 2019 年的 Apache Flink(文末有福利) | 12月31号云栖号夜读(https://yq.aliyun.com/articles/741284)

更多干货内容 请关注阿里云云栖号公众号!
C5AD0950_C5CE_4EAE_BE76_909C90E0DA75

登录 后评论

云栖夜读

每日云栖社区技术文章精选,每晚(工作日)18:00前推送;

下一篇
云栖号
8000人浏览
2020-03-04
相关推荐
0
0
0
1434