爬蟲任務(wù)太大怕失控？用 Colly 的 MaxDepth 限制爬取深度，就像給爬蟲裝上“緊箍咒”，輕松精準控制范圍。

一、示例：

package main


import (
    "fmt"


    "github.com/gocolly/colly/v2"
)


func main() {
    // 創(chuàng)建默認收集器，限制最大深度為 2
    c := colly.NewCollector(
        colly.MaxDepth(2), // 只爬取首頁 + 一層鏈接
    )


    // 每次發(fā)現(xiàn) <a href="..."> 標簽就打印并繼續(xù)訪問
    c.OnHTML("a[href]", func(e *colly.HTMLElement) {
        link := e.Attr("href")
        fmt.Println("發(fā)現(xiàn)鏈接：", link)


        // 自動補全絕對路徑后再訪問
        absoluteURL := e.Request.AbsoluteURL(link)
        e.Request.Visit(absoluteURL)
    })


    // 從編程獅首頁開始
    c.Visit("http://eska-fuses.cn/")
}

運行結(jié)果（只爬取兩層）：

發(fā)現(xiàn)鏈接： http://eska-fuses.cn/go
發(fā)現(xiàn)鏈接： http://eska-fuses.cn/python
...

二、深度限制的 3 個關(guān)鍵點

三、完整實戰(zhàn)：爬取編程獅首頁及兩層鏈接

假設(shè)你想爬取編程獅首頁及其兩層鏈接，完整代碼如下：

package main


import (
    "fmt"


    "github.com/gocolly/colly/v2"
)


func main() {
    // 創(chuàng)建默認收集器，限制最大深度為 2
    c := colly.NewCollector(
        colly.MaxDepth(2), // 只爬取首頁 + 一層鏈接
    )


    // 每次發(fā)現(xiàn) <a href="..."> 標簽就打印并繼續(xù)訪問
    c.OnHTML("a[href]", func(e *colly.HTMLElement) {
        link := e.Attr("href")
        fmt.Println("發(fā)現(xiàn)鏈接：", link)


        // 自動補全絕對路徑后再訪問
        absoluteURL := e.Request.AbsoluteURL(link)
        e.Request.Visit(absoluteURL)
    })


    // 從編程獅首頁開始
    c.Visit("http://eska-fuses.cn/")
}

四、常見問題速查

五、1 分鐘實驗

1. 打開 Go 環(huán)境 → 新建 main.go。
2. 復(fù)制上方代碼 → 運行。
3. 觀察終端：只爬取兩層鏈接，不會無限深入。

標題：Colly 爬取深度限制：精準控制爬蟲范圍（小白適配版）| 編程獅教程
描述：
關(guān)鍵詞：Colly 爬取深度、MaxDepth、爬蟲范圍控制、編程獅