在laravel中使用Symfony的Crawler組件分析HTML

Crawler全名是DomCrawler，是Symfony框架的組件。

令人髮指的是DomCrawler的沒有中文文檔，

Symfony也沒有翻譯該部分，

所以使用DomCrawler開發只能一點一點摸索，

現將使用過程中的經驗總結。

首先是安裝

css-seelctor 是 css選擇器，用css選擇節點時一些函數會用到

手冊裡面使用的例子是

列印的結果是

因為這段html代碼的nodeName就是html，英語不好，開始使用的時候還以為程序錯了。。。

實際使用過程，如果new Crawler($html)會出現亂碼問題，應該是與頁面編碼有關，所以可以採用下面的方式，先初始化crawler，然後添加node

addHtmlContent的第二個參數是charset，默認是utf-8。

其他例子可以參考官方文檔，http://symfony.com/doc/current/components/dom_crawler.html

記錄一下工作中一點點試出來的用法

filterXPath(string $xpath) 方法，按照手冊上的說法，該方法的參數是$xpath，經常用的是p，div等塊。

輸出是第一個和下一個p標籤塊的文本

輸出body內的html

filterXPath獲得的是DOMElement塊的數組，每個DOMElement塊可以使用新的crawler對象繼續解析

crawler提供了each循環，使用閉包函數簡化代碼，不過注意的是，這種寫法$nodeValues得到的是數組，需要進一步處理。

其他用法

可以獲得第一個p標籤對應class屬性的值「message」

以上是獲得標籤屬性的一些方法

filter和filterXPath不同，手冊上寫的是css選擇器，不太明白，我理解是div這種XPath節點包含的元素，具體情況還需要在實際開發中去嘗試。

總的來說感覺DomCrawler要比simple html dom好用一些，可能是我用的比較淺顯。

上述只是Crawler的基本功能，更過用法請查閱symfony手冊關於Crawler部分的函數

http://api.symfony.com/3.2/Symfony/Component/DomCrawler/Crawler.html

Crawler主要問題還是示例太少，函數手冊裡面沒有使用實例，只能在實際使用中去摸索。。。。

symfony關於DomCrawler的文檔，裡面有少數例子

http://symfony.com/doc/current/components/dom_crawler.html

點擊展開全文

喜歡這篇文章嗎？立刻分享出去讓更多人知道吧！