配置

#配置#

已有17人关注此标签

内容分类

时默

基于Knox登录Yarn UI查看SparkStreaming作业兼容性问题说明

问题背景 1.登录EMR集群节点,运行SparkStreaming示例,如下所示(不同版本EMR集群spark-examples_xxx.jar的路径略有差异): [root@emr-header-1 ~]# spark-submit --class org.

泽尘

Aliyun Serverless VSCode Extension v1.5.0 发布

Aliyun Serverless VSCode Extension 是阿里云 Serverless 产品 函数计算 Function Compute 的 VSCode 插件,该插件结合了函数计算 Fun 工具以及函数计算 SDK ,是一款 VSCode 图形化开发调试函数计算以及操作函数计算资源的工具。

泽尘

Aliyun Serverless VSCode Extension v1.5.0 发布

Aliyun Serverless VSCode Extension 是阿里云 Serverless 产品 函数计算 Function Compute 的 VSCode 插件,该插件结合了函数计算 Fun 工具以及函数计算 SDK ,是一款 VSCode 图形化开发调试函数计算以及操作函数计算资源的工具。

点金米

阿里云轻量应用服务器和ECS云服务器哪个好?

说到轻量应用服务器和ECS云服务器哪个好,其实在同等配置下,两者的功能并没有差别。价格方面也基本持平,只是因为轻量服务器更多的是照顾到入门级用户,所以更多强调易用性,所以建议新手个人级用户可以选择轻量应用服务器

未央&

Linux的密钥——实现无密码登录

1、安全密钥 加密是对信息进行编码和解码的技术,它通过一定的算法(密钥)将原本可以直接阅读的明文信息转换成密文形式。密钥即是密文的钥匙,有私钥和公钥之分。在传输数据时,如果 担心被他人监听或截获,就可以在传输前先使用公钥对数据加密处理,然后再行传送。

阿里云管家

阿里云服务器专属活动:爆款云服务器限时2折起,3年仅需538元(精)

8月爆款云服务器限时抢,云服务器2折起是阿里云转为8月份推出的全新最新活动,精选全网性价比最高的爆款ECS服务器,限时2折起,且活动截止时间为8月29日,对于需要在8月份购买阿里云服务器的用户来说,参加此活动无疑是最划算的。

云hbase+spark

SparkStreming:使用Checkpoint创建StreamingContext修改executor-cores、executor-memory等资源信息不生效。

在使用SparkStreaming时,使用StreamingContext.getOrCreate(checkpointDirectory, functionToCreateContext _)创建StreamingContext。

王知无

使用Flink实现索引数据到Elasticsearch

5万人关注的大数据成神之路,不来了解一下吗? 5万人关注的大数据成神之路,真的不来了解一下吗? 5万人关注的大数据成神之路,确定真的不来了解一下吗? 欢迎您关注《大数据成神之路》 使用Flink处理数据时,可以基于Flink提供的批式处理(Batch Processing)和流式处理(Streaming Processing)API来实现,分别能够满足不同场景下应用数据的处理。

黄小斜

深入理解JVM虚拟机10:JVM常用参数以及调优实践

本文出自我的公众号:程序员江湖。 满满干货,关注就送。 转自http://www.rowkey.me/blog/2016/11/02/java-profile/?hmsr=toutiao.

黄小斜

深入理解JVM虚拟机7:JNDI,OSGI,Tomcat类加载器实现

打破双亲委派模型 JNDI JNDI 的理解 JNDI是 Java 命名与文件夹接口(Java Naming and Directory Interface),在J2EE规范中是重要的规范之中的一个,不少专家觉得,没有透彻理解JNDI的意义和作用,就没有真正掌握J2EE特别是EJB的知识。

王知无

Flink/Spark 如何实现动态更新作业配置

由于实时场景对可用性十分敏感,实时作业通常需要避免频繁重启,因此动态加载作业配置(变量)是实时计算里十分常见的需求,比如通常复杂事件处理 (CEP) 的规则或者在线机器学习的模型。尽管常见,实现起来却并没有那么简单,其中最难点在于如何确保节点状态在变更期间的一致性。

未央&

Linux下的yum

yum是Linux系统下最重要的安装软件的方式,不但要熟悉其客户端的配置使用,也要了解服务端的仓库搭建

知了一笑

SpringBoot2.0 基础案例(11):配置AOP切面编程,解决日志记录业务

一、AOP切面编程 1、什么是AOP编程 在软件业,AOP为Aspect Oriented Programming的缩写,意为:面向切面编程,通过预编译方式和运行期动态代理实现程序功能的统一维护的一种技术。

秦子帅

Okhttp3源码解析(1)-OkHttpClient分析

前言 上篇文章我们讲了Okhttp的基本用法,今天根据上节讲到请求流程来分析源码,那么第一步就是实例化OkHttpClient对象,所以我们今天主要分析下OkHttpClient源码! 初始化-构造方式 创建 OkHttpClient实例的两种方式 1.

雪梦科技

在macOS上安装配置golang开发环境

本文主要介绍如何在macOS上安装配置golang开发环境。 一、安装 Homebrew 打开终端,输入以下命令安装 Homebrew /usr/bin/ruby -e "$(curl -fsSL https://raw.

知了一笑

SpringBoot2.0 基础案例(10):整合Mybatis框架,集成分页助手插件

一、Mybatis框架 1、mybatis简介 MyBatis 是一款优秀的持久层框架,它支持定制化 SQL、存储过程以及高级映射。MyBatis 避免了几乎所有的 JDBC 代码和手动设置参数以及获取结果集。

桥志

如何在Linux上挂载OSS Bucket

阿里云OSS存储是由阿里云提供的高可用,大容量的对象存储系统,用户使用OSS来存储图片,视频,日志和其它的静态的数据文件。而很多用OSS存放文件的用户都希望能够在ECS或者线下的环境中直接挂载访问OSS中的数据。

xiaoli_test

利用云存储网关实现数据分层存储

本文介绍了云存储网关结合OSS Bucket的生命周期功能的数据分层存储方案。云存储网关以OSS Bucket为后端存储空间,通过本地存储空间缓存了热点数据,保证了前端应用的本地访问性能,同时又可以利用云上海量的存储空间。

黄小斜

走进JavaWeb技术世界16:极简配置的SpringBoot

SpringBoot详解(一)-快速入门 SpringBoot详解系列文章:SpringBoot详解(一)-快速入门SpringBoot详解(二)-Spring Boot的核心SpringBoot详解(三)-Sprin.

黄小斜

深入JavaWeb技术世界15:通过项目逐步深入了解Mybatis(二)

本文出自我的公众号:程序员江湖。 满满干货,关注就送。 转自http://www.54tianzhisheng.cn/2017/06/13 Mybatis 解决 jdbc 编程的问题 1、 数据库链接创建、释放频繁造成系统资源浪费从而影响系统性能,如果使用数据库链接池可解决此问题。