爬了知乎 200 万数据,图说程序员都喜欢去哪儿工作
点击上方“CSDN”,选择“置顶公众号”关键时刻,第一时间送达!因为最近和朋友吃饭,大家都到了大三季,都在纠结自己该以哪里作为自己职业发展的起点?也想看看自己的背景,能不能找到靠谱的师哥师姐帮忙,那么师哥师姐都在哪里发光发亮呢?我当时也是午休的时候想到,知乎有那么多结构化的好的数据,不如抓取之,拿来分析可以看看名校生们都在哪?我们行业的人都喜欢哪,哪里每年带走一堆人
·
点击上方“CSDN”,选择“置顶公众号”
关键时刻,第一时间送达!
因为最近和朋友吃饭,大家都到了大三季,都在纠结自己该以哪里作为自己职业发展的起点?也想看看自己的背景,能不能找到靠谱的师哥师姐帮忙,那么师哥师姐都在哪里发光发亮呢?
我当时也是午休的时候想到,知乎有那么多结构化的好的数据,不如抓取之,拿来分析可以看看名校生们都在哪?
我们行业的人都喜欢哪,哪里每年带走一堆人?
然后花半小时写了个多线程爬虫,爬下来几百万数据(其中每个学校的大圆圈占比代表该校学生在调研总数中的占比):
这次抓取的数据量有将近 200 万,跑了一个下午,然后我把没有公司或者教育学校的筛掉,就还剩 25 万了~
————— END —————
苹果为 macOS 重大漏洞道歉;迅雷内讧股价暴跌;小米百度在一起 | 一周业界事
为什么总说程序员是吃青春饭的?真的是 35 岁混不到管理就等于失业?
更多推荐
所有评论(0)