请教 Laravel 怎么提取一个页面中的特定内容（传说中的爬虫？）

This topic created in 3659 days ago, the information mentioned may be changed or developed.

想要提取某个网站的一个页面上的特定内容，页面大体结构就是一些 div 、 table ，需要提取的是一个 table 中的内容， table 有 ID ，要提取的内容也有特定的 class

因为本身项目是 Laravel ，所以想也用 Laravel 实现，请指教一下思路？有什么包可以用？

11 replies • 2016-06-03 20:05:10 +08:00

xuxu

Jun 3, 2016

这跟 Laravel 没关系😄

lissome

Jun 3, 2016

@xuxu 和 PHP 有关系？

xummerj

Jun 3, 2016

这个你可以直接用 curl 获取内容，然后正则或者 PHP Simple HTML DOM 解析;
还有可以看看这相
https://github.com/FriendsOfPHP/Goutte

yangqi

Jun 3, 2016

和 laravel 没关系，看看 DomCrawler 这个包

jugelizi

Jun 3, 2016

Laravel 什么时候变爬虫了？
curl 抓取 [snoopy] 然后解析 [simple_html_dom_node]

lissome

Jun 3, 2016

@yangqi
@xummerj 谢谢指点

@jugelizi 并不是要用 Laravel 做爬虫，只是想在现有 Laravel 项目里实现一个这个功能

terranboy

Jun 3, 2016

goutte 不错可惜是单线程

tagtag

Jun 3, 2016

file_get_contents+正则

Moker

Jun 3, 2016

phpQuery 用这个，语法和 JQ 一样 $('table').html()

icybee

Jun 3, 2016

进队列，后台守护进程抓去入库，推荐用各种 mq 实现

thenbsp

Jun 3, 2016