Golang 并发限制5个协成工作

最新推荐文章于 2024-08-03 00:15:39 发布

foxtool23

最新推荐文章于 2024-08-03 00:15:39 发布

阅读量612

点赞数

分类专栏： Golang 文章标签： go

本文链接：https://blog.youkuaiyun.com/foxtool23/article/details/106409806

版权

Golang 专栏收录该内容

2 篇文章

订阅专栏

本文介绍了一个使用Golang进行大规模并发网络请求的示例，通过限制最大协程数来控制并发量，演示了如何使用Go语言进行高效的数据抓取和处理。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

package main

import (
    "fmt"
    "time"
    "strconv"
    "net/http"
    "io/ioutil"

)

var (
    maxRoutineNum = 5
)


func main() {
    ch  := make(chan int, maxRoutineNum)

    for i := 1; i < 2000000; i++ {
        ch  <- 1
        go func(i int) {

            run(i)

            defer func() { <-ch }()
        }(i)
        fmt.Println("+")
    }

    //确保执行完后主线程再退出
    for i := 0; i < 10; i++ {
        ch <- 1
    }


}

func run(s int){
    str := strconv.Itoa(s)
    fmt.Println("*"+str+"*")

    HttpGet("https://xg623.oss-cn-hongkong.aliyuncs.com/623.apk",str)

    //time.Sleep(1*time.Second)
    time.Sleep(1*time.Microsecond)
}

func HttpGet(url string,s string) (string,error){
    resp, err := http.Get(url+"?rnd="+s)
    if err != nil {
        fmt.Println(err)
        return "",err
    }
    defer resp.Body.Close()
    body, err := ioutil.ReadAll(resp.Body)
    if err != nil {
        fmt.Println(err)
        return "",err
    }
    err = ioutil.WriteFile("E:\\GoPro\\src\\test\\down\\"+s, body, 0777)
    if err != nil {
      fmt.Println(err)
      return "",err
    }
    return string(body),nil
}