
最近在攻爬虫
实操是最好的老师
所以每周我会在留言里按时间选 10 个项目
因为是免费的,所以得加些限制
单应用,即不需要代理、没有很变态的验证码、没有很复杂的 JS 解析 python3 只负责写爬虫,运行得自己的机子 先留言占位,然后私信我详细的需求。私信尽量简介、全面。你只有一次私信需求的机会。
我会私信你是否接受和大概完成的时间。每天 20:点之前我会看完当日所有需求,20:00 以后按第二天算
单名一个 c 后缀 freelancecn.com
1 loading 2018-11-04 18:16:59 +08:00 via Android 爬知乎日报,如何正确地吐槽。 |
2 clecho 2018-11-04 18:19:35 +08:00 via Android 前程无忧,或者拉钩、智联这种招聘网站,这种的容易爬吗? |
3 acoldfox 2018-11-04 18:21:25 +08:00 via iPhone 根据关键词爬取豆瓣电影搜索结果 |
4 Selection 2018-11-04 18:30:00 +08:00 via iPhone 我想爬大发彩票网,不过他有的一些信息加了锁 |
5 huntzhan 2018-11-04 18:33:25 +08:00 汽车之家 |
6 Muninn 2018-11-04 18:55:57 +08:00 天眼查或者企查查,他们自己都是爬来的信息,不知道反爬虫做的强不强。 |
7 Leigg 2018-11-04 19:43:29 +08:00 via iPhone wechat 指定 n 个公众号下所有文章的内容评论阅读数赞,有时间精力可一试。 |
8 Heartbleed 2018-11-04 19:47:15 +08:00 via Android 能做个像推酷 APP 的那种功能吗 |
9 Joshua999 2018-11-04 22:01:21 +08:00 via Android 维基百科政治相关的人物以及任职信息出生信息 |
10 chainmon 2018-11-04 22:30:45 +08:00 via Android 句子迷 |
13 SpiderXiantang 2018-11-04 23:04:36 +08:00 写个框架吧 |
14 tomxin7 2018-11-04 23:07:52 +08:00 全国的高校就业信息网,类似 jiandan.live 哎,要是有套框架就好了 |
15 saran 2018-11-04 23:15:02 +08:00 可以不用 scrapy 不?就爬一下 unicode 对应的 unicode-id |
16 mabeple 2018-11-04 23:22:39 +08:00 via iPhone 我也在学爬虫。还不是很熟 |
17 explore365 2018-11-04 23:44:55 +08:00 @Leigg 公众号的好爬 |
19 kawkeye 2018-11-04 23:48:09 +08:00 @explore365 #17 我之前从搜狗那个微信接口爬,失效太快了,不会找 token,有时候还会解码不了源代码 |
20 erlking 2018-11-04 23:50:13 +08:00 via iPhone 根据微博 id 获取此人点赞过的微博内容 |
22 legiorange 2018-11-05 10:32:39 +08:00 脉脉 主要是我和我家人收到这垃圾 app 的短信 |
23 ddzzhen 2018-11-05 14:18:48 +08:00 请大神协助,这个网站我关注很久了,死活爬不到,貌似用的 socket 传的数据,不得要领,只要能够每小时爬取一次就行的,地址: http://www.usdebtclock.org/ |
24 ucun OP @loading py 文件下载 https://omnas.ml/s/55YrRydoQZdBSib 效果图 https://i.loli.net/2018/11/05/5bdff52b41c2c.png 需求不详细,所以只有当日份的吐槽。也只能是命令行查看。 |
26 soulm 2018-11-05 16:43:25 +08:00 豆瓣电影搜索(输入电影名,输出搜索结果),要用到 post |
27 foxyier 2018-11-07 10:14:52 +08:00 看了看评论, 已经知道拿什么网站练手了 |
29 locoz 2018-11-08 12:54:15 +08:00 “单应用,即不需要代理、没有很变态的验证码、没有很复杂的 JS 解析”。。那不就是写 xpath 和正则吗,这种难度其实没啥必要拿来练手。 直接找个应用商店把热度排行前 100 里大厂的社交媒体类 APP 的网站版和 APP 版都爬一遍,这种有难度的才能叫练手。 |
30 ilovemeizi 2019-03-03 15:00:15 +08:00 您好,请问您现在还爬吗,能否帮我爬取百度招聘所有招聘数据保存下来用于个人的毕业设计, |