golang爬虫爬取docker hub和存储库的url获取image镜像名称和tag所有版本信息

以下是一个基本的Golang爬虫程序，用于从Docker Hub获取存储库的URL和镜像名称和标记的所有版本信息：

package main

import (
    "fmt"
    "io/ioutil"
    "net/http"
    "regexp"
)

func main() {
    // Docker Hub存储库URL
    url := "https://hub.docker.com/r/library/"

    // 发送HTTP GET请求
    resp, err := http.Get(url)
    if err != nil {
        fmt.Println("Error:", err)
        return
    }
    defer resp.Body.Close()

    // 读取响应内容
    body, err := ioutil.ReadAll(resp.Body)
    if err != nil {
        fmt.Println("Error:", err)
        return
    }

    // 正则表达式匹配所有镜像名称和标记的版本信息
    re := regexp.MustCompile(`library/([a-zA-Z0-9\-_]+)/tags`)
    matches := re.FindAllStringSubmatch(string(body), -1)

    // 输出所有镜像名称和标记的版本信息
    for _, match := range matches {
        imageName := match[1]
        tagsUrl := fmt.Sprintf("https://hub.docker.com/v2/repositories/library/%s/tags", imageName)

        // 发送HTTP GET请求
        resp, err := http.Get(tagsUrl)
        if err != nil {
            fmt.Println("Error:", err)
            return
        }
        defer resp.Body.Close()

        // 读取响应内容
        body, err := ioutil.ReadAll(resp.Body)
        if err != nil {
            fmt.Println("Error:", err)
            return
        }

        // 解析JSON响应并输出所有版本信息
        fmt.Println(imageName)
        fmt.Println("--------------------")
        fmt.Println(string(body))
        fmt.Println("====================")
    }
}

该程序首先发送HTTP GET请求以获取Docker Hub存储库的URL，然后使用正则表达式匹配所有镜像名称和标记的版本信息。对于每个匹配项，它将构建一个URL以获取该镜像的所有版本信息，并发送另一个HTTP GET请求。最后，它将解析JSON响应并输出所有版本信息