扩展是Colly附带的小助手实用程序。插件列表在这里是可用的。

使用

下面的示例启用随机用户代理切换器和引用setter扩展，并访问httpbin.org两次。

  1. import (
  2.     "log"
  4.     "github.com/gocolly/colly"
  5.     "github.com/gocolly/colly/extensions"
  6. )
  8. func main() {
  9.     c := colly.NewCollector()
  10.     visited := false
  12.     extensions.RandomUserAgent(c)
  13.     extensions.Referer(c)
  15.     c.OnResponse(func(r *colly.Response) {
  16.         log.Println(string(r.Body))
  17.         if !visited {
  18.             visited = true
  19.             r.Request.Visit("/get?q=2")
  20.         }
  21.     })
  23.     c.Visit("http://httpbin.org/get")
  24. }