成果物 — リンクの生死を調べる道具

OK  https://www.python.org/  (200)
OK  https://go.dev/  (200)
OK  https://tsumiki-key.pages.dev/  (200)
NG  https://example.com/kono-page-wa-nai  (404)

4件を 431ms で調べました

# 1行に1つURLを書く。# で始まる行は飛ばす。
https://www.python.org/
https://go.dev/
https://tsumiki-key.pages.dev/
https://example.com/kono-page-wa-nai

// urls.txt に並べたURLを1つずつ見に行って、生きているかどうかを表示する。
package main

import (
	"bufio"
	"fmt"
	"net/http"
	"os"
	"strings"
	"time"
)

// 待ち続けないように、1件あたりの上限を決めておく。
var client = &http.Client{Timeout: 10 * time.Second}

// readURLs は、ファイルからURLを1行ずつ読む。空行と # で始まる行は飛ばす。
func readURLs(path string) ([]string, error) {
	f, err := os.Open(path)
	if err != nil {
		return nil, err
	}
	defer f.Close()

	var urls []string
	scanner := bufio.NewScanner(f)
	for scanner.Scan() {
		line := strings.TrimSpace(scanner.Text())
		if line == "" || strings.HasPrefix(line, "#") {
			continue
		}
		urls = append(urls, line)
	}
	return urls, scanner.Err()
}

// check は1件のURLを見に行って、表示する1行を作る。
func check(url string) string {
	res, err := client.Get(url)
	if err != nil {
		return fmt.Sprintf("NG  %s  (%v)", url, err)
	}
	defer res.Body.Close()

	if res.StatusCode >= 400 {
		return fmt.Sprintf("NG  %s  (%d)", url, res.StatusCode)
	}
	return fmt.Sprintf("OK  %s  (%d)", url, res.StatusCode)
}

func main() {
	path := "urls.txt"
	if len(os.Args) > 1 {
		path = os.Args[1]
	}

	urls, err := readURLs(path)
	if err != nil {
		fmt.Println("URLの一覧が読めませんでした:", err)
		os.Exit(1)
	}

	start := time.Now()
	for _, url := range urls {
		fmt.Println(check(url))
	}
	fmt.Printf("\n%d件を %v で調べました\n", len(urls), time.Since(start).Round(time.Millisecond))
}