在此特定示例中，我应在哪里关闭渠道？

Question

我只编写了一个简单的Go管道，目标是获取url和打印状态。

在fetchUrl上，我需要关闭通道以通知main，不会有任何数据发出，因此请释放main go例程。但是，在循环后，我无法真正关闭fetchurl函数上的通道，因为它太早了。我不想在应用程序中添加等待组，因为目前的总体目标是让我了解渠道。

在fetchurl函数上，名为2的通道仅用于确保一次只有2个作业。

package main

import (
    "fmt"
    "net/http"
    "os"
)

func gen(val []string) <-chan string {
    out := make(chan string, len(val))
    for _, val := range val {
        out <- val
    }
    close(out)
    return out
}

func fetchUrl(in <-chan string) <-chan string {
    out := make(chan string)
    two := make(chan struct{}, 2)
    fmt.Println("blocked")
    for url := range in {
        two <- struct{}{}
        go fetchWorker(url, two, out)
    }

    return out
}

func fetchWorker(url string, two chan struct{}, out chan string) {
    res, err := http.Get("https://" + url)
    if err != nil {
        panic(err)
    }
    <-two
    out <- fmt.Sprintf("[%d] %s\n", res.StatusCode, url)
}

func main() {
    for val := range fetchUrl(gen(os.Args[1:])) {
        fmt.Println(val)
    }
}

Answer 1

写入每个结果后，您需要关闭out通道。最简单的方法是在所有工作程序goroutine均已退出时，最简单的方法是使用sync.WaitGroup。 （在Go中，通道和goroutines是非常相关的概念，因此goroutine管理是使用通道的一部分。）

在现有代码中，您可以将其绑定到fetchUrl函数中：

var wg sync.WaitGroup
for url := range in {
    two <- struct{}{}
    wg.Add(1)
    go func() {
        defer wg.Done()
        fetchWorker(url, two, out)
    }()
}
wg.Wait()
close(out)

您编写的代码会遇到的另一个结构性问题是gen和fetchUrl都创建通道，运行所有应写入通道的代码，并仅在这些编写器之后返回通道完;由于函数返回之前无法从通道读取任何内容，因此将导致死锁。您可以通过在顶层创建所有通道并将它们传递到生成器函数中来解决此问题。

[如果您想让两个工作人员从相同的URL队列中读取，一种标准模式是仅启动两个从相同通道进行读写的goroutine。例如，您可以将fetchWorker重写为

func fetchWorker(urls <-chan string, out chan<- string) {
    for url := range urls {
        res, err := http.Get("https://" + url)
        if err != nil {
            panic(err)
        }
        out <- fmt.Sprintf("[%d] %s\n", res.StatusCode, url)
    }
}

在顶层，创建通道，创建工作程序，提供输入，并使用输出。

func main() {
    urls := make(chan string)
    out := make(chan string)

    // Launch a goroutine to feed data into urls, then
    // close(urls), then stop
    go gen(os.Args[1:], urls)

    // Launch worker goroutines
    workerCount := 2
    var wg sync.WaitGroup
    for i := 0; i < workerCount; i++ {
        wg.Add(1)
        go func() {
            defer wg.Done()
            fetchWorker(urls, out)
        }()
    }

    // Launch a dedicated goroutine to close the channel
    go func() {
        wg.Wait()
        close(out)
    }()

    // Read the results
    for result := range(out) {
        fmt.Println(result)
    }
}