Image

#Image#

已有8人关注此标签

内容分类

时默

基于Knox登录Yarn UI查看SparkStreaming作业兼容性问题说明

问题背景 1.登录EMR集群节点,运行SparkStreaming示例,如下所示(不同版本EMR集群spark-examples_xxx.jar的路径略有差异): [root@emr-header-1 ~]# spark-submit --class org.

王知无

SparkSQL的3种Join实现

5万人关注的大数据成神之路,不来了解一下吗?5万人关注的大数据成神之路,真的不来了解一下吗?5万人关注的大数据成神之路,确定真的不来了解一下吗? 欢迎您关注《大数据成神之路》 引言 Join是SQL语句中的常用操作,良好的表结构能够将数据分散在不同的表中,使其符合某种范式,减少表冗余、更新容错等。

王知无

王知无

Apache Flink:Keyed Window与Non-Keyed Window

5万人关注的大数据成神之路,不来了解一下吗?5万人关注的大数据成神之路,真的不来了解一下吗?5万人关注的大数据成神之路,确定真的不来了解一下吗? Apache Flink中,Window操作在流式数据处理中是非常核心的一种抽象,它把一个无限流数据集分割成一个个有界的Window(或称为Bucket),然后就可以非常方便地定义作用于Window之上的各种计算操作。

王知无

Flink 网络传输优化技术

5万人关注的大数据成神之路,不来了解一下吗? 5万人关注的大数据成神之路,真的不来了解一下吗? 5万人关注的大数据成神之路,确定真的不来了解一下吗? 作为工业级的流计算框架,Flink 被设计为可以每天处理 TB 甚至 PB 级别的数据,所以如何高吞吐低延迟并且可靠地在算子间传输数据是一个非常重要的课题。

王知无

Redis单线程?别逗了,Redis6.0多线程重磅来袭!

2019年的 RedisConf 比以往时候来的更早一些,今年会议时间是4月1-3号,仍然是在旧金山鱼人码头Pier 27。恰逢今年是 Redis 第10周年,规模也比以往大一些,注册人数超过1600人,总共有80个议题,除了RedisLabs外还有很多云厂商和Redis用户带来分享。

stefanie燕

阿里云服务器搭建(全套步骤)

先为大家带来一点福利。阿里云最近开始发放代金券了,新老用户均可免费获取,1880元代金券,建议大家都领取一份,反正是免费领的,说不定以后需要呢?阿里云代金卷链接 1、远程服务器安装iis+php+mysql环境 iis+php+mysql环境:https://download.

云上珠玑

对象存储OSS如何通过PutObject上传文件?

迁移OSS的文件,就是将用户其他数据源的文件迁移至OSS。接下来几篇文章将介绍的方法是以下四种:一、通过API/SDK上传文件;二、通过API/SDK拷贝文件;三、通过oss-import工具迁移文件;四、通过云市场服务迁移文件。

流体石头

Docker入门-搭建docker私有仓库

Docker Hub 目前Docker官方维护了一个公共仓库Docker Hub,其中已经包括了数量超过15000个镜像。大部分需求都可以通过在Docker Hub中直接下载镜像来使用。 注册登录 可以在https://hub.docker.com 免费注册一个Docker账号。

桥志

如何在Linux上挂载OSS Bucket

阿里云OSS存储是由阿里云提供的高可用,大容量的对象存储系统,用户使用OSS来存储图片,视频,日志和其它的静态的数据文件。而很多用OSS存放文件的用户都希望能够在ECS或者线下的环境中直接挂载访问OSS中的数据。

ezpod

基于卷积神经网络的品牌LOGO识别原理与代码

人工智能之父John McCarthy将AI视为科学和工程的结合,而机器学习是AI已经实现的部分,利用机器学习技术,计算机能够通过体验(数据)来像人类一样学习,而不需要被显式地编程。这篇文章将详细介绍我们在大作业项目如何使用Python的Keras深度学习框架,实现一个卷积神经网络(Convolutional Neural Network)来识别图像中的店铺LOGO/招牌。

冬岛

Knative Serving 之路由管理和 Ingress

Knative 默认会为每一个 Service 生成一个域名,并且 Istio Gateway 要根据域名判断当前的请求应该转发给哪个 Knative Service。Knative 默认使用的主域名是 example.com,这个域名是不能作为线上服务的。

Java架构师追风

一次性集中处理大量数据的定时任务,如何缩短执行时间?

处理亿级数据的“定时任务”,如何缩短执行时间?

异步社区

异步社区又更新,这些你常用的功能变化一定要知道!

伴随着异步社区4.X版本升级,社区功能在内容型态和功能都做出了不小的改版和优化。如果你近期登录了异步社区,肯定发现了不小的更新,说不定已经体验了新功能。如果你还没有探索到新功能的精髓,就收下异步君这份总结吧。首先敲重点,这些你常用的功能点值得关注。

阿锟儿

运维编排场景系列----更新ECS镜像

运维编排场景系列----更新ECS镜像 场景介绍       为了保证ECS实例的运行环境始终是安全的,包括安装最新补丁,或者更新所依赖的组件等。我们需要从一个源镜像开始逐步更新,最终生成一个新镜像,然后用于测试和生产。

Java架构师追风

5种JVM垃圾收集器特点和8种JVM内存溢出原因

5种JVM垃圾收集器特点和8种JVM内存溢出原因

易天光通信

易天光通信与您相约第21届光博会CIOE,不见不散-2019

岁月不居,时节如流,第21届CIOE,即将到来! 中国国际光电博览会(简称CIOE)是极具规模及影响力的光电产业综合性展会,覆盖光通信、光电传感、数据中心等光电产业链版块。作为集中光电全产业链的专业展会,CIOE已成为众多企业市场拓展、品牌推广的首选平台,更是为业内人士提供了寻找新技术及新产品、了解市场先机的一站式商贸、技术及学术交流的专业平台。

毓秀清荷

教你怎么购买阿里云服务器(ECS)附价格表查询

一:访问阿里云可领取2000限量优惠券(以前是1888元) 二:注册阿里云账号,或者使用淘宝账号登录激活阿里云账号。 三:从产品里面选择云服务器ECS 四:进入页面后选择立即购买,当天也可以看一下他的介绍后在点击购买 五:选择购买的配置, 主要从以下几个方面考虑:     1.付费方式:按年付费,按使用量付费。

流体石头

Docker入门-构建第一个Java程序

定制镜像 准备一个没有第三方依赖的java web项目,可能参考示例maven结构项目: session-web.war 把该war上传到安装有docker软件的服务器上宿主目录下。在同级目录创建Dockerfile touch Dockerfile vim Dockerfile 按照前面文章所学...