我想爬取简书在某一时间段的帖子,比如 2013 年 4 月 13 — 2013 年 5 月 13
想尝试的思路如下:
-
百度
- 利用百度的 site 语法

- 限定日期

- 观察大约有 70 个帖子

- 利用百度的 site 语法
-
Google
- google 的 site 语法

- 限定日期有 120 个帖子

- 观察大约有 120 个帖子

- google 的 site 语法
实现:用 Python 直接请求搜索的结果,然后把得到的网址重定向一下得到真正的简书网址,然后对真正的网址进行请求
问题
- 用这种方法得到的结果是否靠谱?请问有更靠谱的方法吗?
- 用 Google 还是用百度呢?
先谢谢各位大 V,:)