千家信息网

golang中怎么利用chromedp爬虫打开新标签页

发表于:2024-12-04 作者:千家信息网编辑
千家信息网最后更新 2024年12月04日,本篇文章给大家分享的是有关golang中怎么利用chromedp爬虫打开新标签页,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。使用chr
千家信息网最后更新 2024年12月04日golang中怎么利用chromedp爬虫打开新标签页

本篇文章给大家分享的是有关golang中怎么利用chromedp爬虫打开新标签页,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。

使用chromedp爬虫时,如果点击属性为target="_blank"的a标签,上下文仍然停留在当前网页,需要使用其它的容器打开新页面。

package mainimport (    "context"    "fmt"    "github.com/chromedp/cdproto/target"    "github.com/chromedp/chromedp"    "log"    "net/http"    "net/http/httptest")func main() {    ctx, cancel := chromedp.NewContext(context.Background())    defer cancel()    ch := addNewTabListener(ctx)    err := chromedp.Run(ctx,        chromedp.Navigate("https://music.migu.cn/v3/music/player/audio"),        chromedp.SetValue("#search_ipt", "输入要搜索的歌曲名", chromedp.ByID),        chromedp.Click(`i[class="iconfont cf-nav-sousuo"]`, chromedp.BySearch),    )    if err != nil {        log.Fatal(err)    }    newCtx, cancel := chromedp.NewContext(ctx, chromedp.WithTargetID(<-ch))    defer cancel()    var res string    err = chromedp.Run(newCtx,        chromedp.OuterHTML(`div[class="songlist-body"]`, &res, chromedp.BySearch),    )    if err != nil {        log.Fatal(err)    }    // 输出了新打开标签页的html    fmt.Println(res)}/** * 注册新tab标签的监听服务 */func addNewTabListener(ctx context.Context) <-chan target.ID {    mux := http.NewServeMux()    ts := httptest.NewServer(mux)    defer ts.Close()    return chromedp.WaitNewTarget(ctx, func(info *target.Info) bool {        return info.URL != ""    })}

以上就是golang中怎么利用chromedp爬虫打开新标签页,小编相信有部分知识点可能是我们日常工作会见到或用到的。希望你能通过这篇文章学到更多知识。更多详情敬请关注行业资讯频道。

0