У меня есть эта тестовая программа, которая будет извлекать url параллельно, но когда я увеличиваю параллельное число до 1040, я начинаю получать ошибку lookup www.httpbin.org: no such host
.
После некоторых Google я нашел, что другие говорят, что не закрыть ответ, вызовет проблему, но я закрываю это с помощью res.Body.Close()
.
В чем проблема? Большое спасибо.
package main
import (
"fmt"
"net/http"
"io/ioutil"
)
func get(url string) ([]byte, error) {
client := &http.Client{}
req, _ := http.NewRequest("GET", url, nil)
res, err := client.Do(req)
if err != nil {
fmt.Println(err)
return nil, err
}
bytes, read_err := ioutil.ReadAll(res.Body)
res.Body.Close()
fmt.Println(bytes)
return bytes, read_err
}
func main() {
for i := 0; i < 1040; i++ {
go get(fmt.Sprintf("http://www.httpbin.org/get?a=%d", i))
}
}