根据v2ex上1200个招聘帖统计的招聘地区和程序语言相关信息
faceair · faceair · 2013-11-07 15:54:29 +08:00 · 4747 次点击这是一个创建于 4033 天前的主题，其中的信息可能已经有所发展或是发生改变。
最近在学python，没事写了个小爬虫来统计了下招聘贴的消息。
共统计了招聘贴前60页，约最近200天，共1200个主题。
代码：
只取了标题，所以有些招聘信息不在标题的没有统计进来。
标题经过哑巴分词再计入数据库，后面的数字为在标题中出现的次数。
地名根据搜狗全国地名词库统计。
工作地区不完全排行榜：
1.北京 304 + 帝都 21 = 325
2.上海 220
3.杭州 85
4.深圳 79
5.广州 51
6.成都 29
7.武汉 19
8.南京 16
9.苏州 8
10.长沙 7
11.珠海 5
12.西安 4
技术名词都是我手动查找的，可能不全，但大致就这样了。
技术名词不完全排行榜：
1.前端 165 + 前端开发 52 = 217
2.php 151 + PHPer 11 = 162
3.android 145
4.ios 144
5.web 104
6.python 94
7.java 72
8.UI 69
9.c++ 23
10.测试 20
11.Linux 19
12.Ruby 18
13.后端 15
14.Node.js 14
15.DBA 10
16.Javascript 9
17.html5 9
可以看到一般公司集中在北京上海，再就是明显前端需求旺盛啊。。
共统计了招聘贴前60页，约最近200天，共1200个主题。
代码：
只取了标题，所以有些招聘信息不在标题的没有统计进来。
标题经过哑巴分词再计入数据库，后面的数字为在标题中出现的次数。
地名根据搜狗全国地名词库统计。
工作地区不完全排行榜：
1.北京 304 + 帝都 21 = 325
2.上海 220
3.杭州 85
4.深圳 79
5.广州 51
6.成都 29
7.武汉 19
8.南京 16
9.苏州 8
10.长沙 7
11.珠海 5
12.西安 4
技术名词都是我手动查找的，可能不全，但大致就这样了。
技术名词不完全排行榜：
1.前端 165 + 前端开发 52 = 217
2.php 151 + PHPer 11 = 162
3.android 145
4.ios 144
5.web 104
6.python 94
7.java 72
8.UI 69
9.c++ 23
10.测试 20
11.Linux 19
12.Ruby 18
13.后端 15
14.Node.js 14
15.DBA 10
16.Javascript 9
17.html5 9
可以看到一般公司集中在北京上海，再就是明显前端需求旺盛啊。。
26 条回复 • 2014-07-13 13:02:41 +08:00
 |
1
Livid MOD V2EX 的分享创造节点最欢迎这样的主题 :-)
|
 |
2
family 2013-11-07 16:00:54 +08:00
必火？
|
 |
3
shiny 2013-11-07 16:04:48 +08:00
bot 抓主题太频繁不会被 v2ex 封 ip 吗？
|
 |
4
faceair OP  1
@shiny 刚开始抓的时候确实被封了几分钟，后来time.sleep(3)就好了。分词插入数据库还占一段时间，所以抓取实际间隔7。8秒左右吧
|
 |
5
romoo 2013-11-07 16:07:44 +08:00
好多前端。
|
 |
6
ChiangDi 2013-11-07 16:09:31 +08:00 via Android
哈哈，壮哉我大杭州
|
 |
7
shadowind 2013-11-07 16:14:48 +08:00
看了这个帖子，觉得更应该学习下前端和PHP了。
|
 |
8
SErHo 2013-11-07 16:18:03 +08:00 2
结巴分词，不是哑巴。。。
|
 |
9
zorceta 2013-11-07 16:20:52 +08:00 via Android
直接mc不行么 看着MySQL好不习惯
|
 |
13
subpo 2013-11-07 16:40:05 +08:00
这数据可以证明好多东西
|
 |
14
justff 2013-11-08 02:28:49 +08:00 via iPhone
运维 呢
|
 |
16
hewwcn 2013-11-08 11:46:37 +08:00
前端比较多有部分原因还是跟社区有关系吧。V2比较偏前端。
|
 |
17
Sherlockhlt 2013-11-08 15:41:26 +08:00
突然才发现v2ex可以发代码
|
|
18
faceair OP @Sherlockhlt 贴的gist.github.com的链接自动转换的
|
 |
19
mengyang 2013-11-09 15:13:54 +08:00
哭了，招运维的真是少啊。。
|
 |
23
seeker 2013-11-09 22:02:51 +08:00 via Android
求饼图
|
 |
24
DeeCheung 2013-11-10 23:40:31 +08:00
-.- 正考虑过了年之后要不要去帝都搞前端。最近 V2EX 招聘都很给力。是时候挪窝了。
|
 |
25
llhh 2013-11-12 07:52:36 +08:00 via Android
不错的东东，直观
|
 |
26
isaced 2014-07-13 13:02:41 +08:00
厉害！
|
Select Language