爬了知乎200万数据,图说程序员都喜欢去哪儿工作

大数据 数据分析 开发
因为最近和朋友吃饭,大家都到了大三季,都在纠结自己该以哪里作为自己职业发展的起点?也想看看自己的背景,能不能找到靠谱的师哥师姐帮忙,那么师哥师姐都在哪里发光发亮呢?

因为最近和朋友吃饭,大家都到了大三季,都在纠结自己该以哪里作为自己职业发展的起点?也想看看自己的背景,能不能找到靠谱的师哥师姐帮忙,那么师哥师姐都在哪里发光发亮呢?

我当时也是午休的时候想到,知乎有那么多结构化的好的数据,不如抓取之,拿来分析可以看看名校生们都在哪?

我们行业的人都喜欢哪,哪里每年带走一堆人?

然后花半小时写了个多线程爬虫,爬下来几百万数据(其中每个学校的大圆圈占比代表该校学生在调研总数中的占比)

这次抓取的数据量有将近200万,跑了一个下午,然后我把没有公司或者教育学校的筛掉,就还剩25万了~ 

责任编辑:庞桂玉 来源: 程序人生
相关推荐

2014-09-24 09:37:05

程序员

2013-01-17 09:54:12

程序员编程

2020-02-25 17:55:53

程序员代码35岁

2021-08-16 08:28:41

程序员高薪现象

2019-11-08 09:47:16

知乎Python数据

2016-12-22 17:01:11

2017-09-01 17:14:00

知乎程序员程序

2015-04-03 17:26:34

Adobe

2015-07-22 09:43:30

2021-02-28 13:29:58

程序员开发招聘

2013-05-03 14:11:43

程序员

2016-12-06 10:12:07

程序员开会

2017-05-24 15:07:19

Python爬虫爬取

2019-05-09 11:02:17

程序员MongoDB数据库

2015-10-19 09:05:01

程序员成长

2015-10-26 10:49:07

程序员

2011-05-31 09:22:39

程序员

2013-12-04 10:23:00

产品经理程序员

2011-05-26 10:04:30

程序员

2014-02-17 09:26:09

架构师程序员
点赞
收藏

51CTO技术栈公众号