用爬虫分析互联网大数据行业薪资情况

技术小能手 2018-07-22

云栖社区 python 大数据 互联网 Image 数据挖掘 Driver

前言:
随着互联网大数据行业的日渐兴盛,越来越多的人投身其中,也有很多的朋友对此有着浓厚的兴趣,想要投身其中。从本期开始我们将分四期带大家走进互联网大数据行业,分别了解数据挖掘&机器学习、数据分析、算法&深度学习、数据产品经理这四个不同的与大数据相关的职位。

数据来源:
我们未来四期的数据主要来源于拉勾网,目前比较火的招聘网站猎聘、boss直聘、拉勾都有比较多的互联网职位介绍。我们基于以下几点原因选择拉勾:1.薪资大多有直接的范围,较少为面议 2. 企业数量较全,基本上涵盖了互联网相关公司 3.url地址相对比较规整,方便进行批量爬取。数据展示页面如下:

image

该部分使用Python中Selenium爬取,部分代码如下:

while
 
True
:
        
try
:
            
for
 j 
in
 
登录 后评论
下一篇
corcosa
16325人浏览
2019-10-08
相关推荐
0
0
0
1674