并发编程 第2阶段·第4/7课
package main
import ("fmt";"sync";"math/rand";"time")
func main() {
r:=rand.New(rand.NewSource(time.Now().UnixNano()));_=r
fmt.Println("=== Worker Pool ===")
jobs:=make(chan int,20);results:=make(chan int,20)
var wg sync.WaitGroup
for w:=0;w<3;w++{wg.Add(1);go func(id int){defer wg.Done();for j:=range jobs{fmt.Printf(" w%d:j%d\n",id,j);results<-j*j}}(w)}
for j:=1;j<=10;j++{jobs<-j};close(jobs)
go func(){wg.Wait();close(results)}()
for range results{}
fmt.Println("Worker Pool完成")
fmt.Println("\n=== Fan-In ===")
ch1:=make(chan string);ch2:=make(chan string)
out:=make(chan string)
go func(){ch1<-"A";ch1<-"A2";close(ch1)}()
go func(){ch2<-"B";ch2<-"B2";close(ch2)}()
var wg2 sync.WaitGroup
for _,c:=range []<-chan string{ch1,ch2}{wg2.Add(1);go func(ch <-chan string){defer wg2.Done();for v:=range ch{out<-v}}(c)}
go func(){wg2.Wait();close(out)}()
for v:=range out{fmt.Printf(" %s\n",v)}
fmt.Println("\n=== Pipeline ===")
gen:=func(nums ...int)<-chan int{c:=make(chan int);go func(){for _,n:=range nums{c<-n};close(c)}();return c}
sq:=func(in <-chan int)<-chan int{c:=make(chan int);go func(){for n:=range in{c<-n*n};close(c)}();return c}
for v:=range sq(gen(1,2,3,4,5)){fmt.Printf(" %d\n",v)}
}
✅ 验证通过 — 实机运行结果:
=== Worker Pool ===
w0:j1
w0:j2
w0:j3
w0:j4
w0:j5
w0:j6
w0:j7
w0:j8
w0:j9
w0:j10
Worker Pool完成
=== Fan-In ===
A
B
A2
B2
=== Pipeline ===
1
4
9
16
25
jobs := make(chan Job, 100)
for i:=0;i<N;i++ { go worker(jobs, results) }
close(jobs) // 发送完关闭
| 知识点 | 关键内容 |
|---|---|
| Worker Pool | 固定worker+任务队列 |
| Fan-In | 多channel合并 |
| Pipeline | 多阶段串行+背压 |
| Semaphore | 缓冲channel限流 |
动态worker/超时/关闭
4阶段Pipeline
3并发限制
go doc查看标准库文档// 1. 预分配切片容量
s := make([]int, 0, expectedSize)
// 2. 使用strings.Builder拼接
var b strings.Builder
b.WriteString("hello")
// 3. 对象池复用
var bufPool = sync.Pool{New: func() interface{} { return new(bytes.Buffer) }}
// 4. 减少逃逸分析
// 小对象栈分配,大对象堆分配
// 5. benchmark测试
func BenchmarkXxx(b *testing.B) {
for i := 0; i < b.N; i++ { ... }
}
// 1. fmt.Printf格式化
fmt.Printf("%+v
", struct) // 带字段名
fmt.Printf("%#v
", value) // Go语法
// 2. log包
log.Printf("debug: value=%v", val)
// 3. delve调试器
// dlv debug ./main.go
// 4. pprof性能分析
import _ "net/http/pprof"
go http.ListenAndServe(":6060", nil)
go doc fmt.Printf 查看标准库文档go test 验证你的理解是否正确// 1. 预分配切片容量 — 避免频繁扩容
s := make([]int, 0, expectedSize)
// 2. strings.Builder拼接 — 比fmt.Sprintf快3-5倍
var b strings.Builder
b.WriteString("hello")
b.WriteString(" world")
result := b.String()
// 3. sync.Pool对象复用 — 减少GC压力
var bufPool = sync.Pool{
New: func() interface{} { return new(bytes.Buffer) },
}
buf := bufPool.Get().(*bytes.Buffer)
defer bufPool.Put(buf)
// 4. 减少堆分配 — 小对象栈分配,避免逃逸
// 用 go build -gcflags="-m" 分析逃逸
// 5. 使用benchmark验证性能
func BenchmarkXxx(b *testing.B) {
for i := 0; i < b.N; i++ {
// 被测代码
}
}
// go test -bench=. -benchmem
// 1. 格式化调试输出
fmt.Printf("%+v
", myStruct) // 带字段名
fmt.Printf("%#v
", myValue) // Go语法表示
// 2. log包运行时日志
log.Printf("[DEBUG] value=%v", val)
log.SetFlags(log.LstdFlags | log.Lshortfile)
// 3. delve源码调试器
// 安装: go install github.com/go-delve/delve/cmd/dlv@latest
// 使用: dlv debug ./main.go
// 命令: break main.main / continue / next / print
// 4. pprof性能分析
import _ "net/http/pprof"
go http.ListenAndServe(":6060", nil)
// 访问: http://localhost:6060/debug/pprof/
// 命令: go tool pprof http://localhost:6060/debug/pprof/profile
// 5. race detector竞态检测
// go run -race main.go
// go test -race ./...
| 工具 | 用途 | 安装 |
|---|---|---|
| golangci-lint | 代码静态检查 | go install github.com/golangci/golangci-lint/cmd/...@latest |
| gofumpt | 代码格式化(增强) | go install mvdan.cc/gofumpt@latest |
| goimports | 自动管理import | go install golang.org/x/tools/cmd/goimports@latest |
| dlv | 源码调试器 | go install github.com/go-delve/delve/cmd/dlv@latest |
| air | 热重载开发 | go install github.com/cosmtrek/air@latest |
| swag | Swagger文档生成 | go install github.com/swaggo/swag/cmd/swag@latest |
| migrate | 数据库迁移 | go install -tags 'postgres' github.com/golang-migrate/migrate/v4/cmd/migrate@latest |
myproject/
├── cmd/ # 可执行程序入口
│ └── server/
│ └── main.go
├── internal/ # 私有代码(不可外部导入)
│ ├── handler/ # HTTP处理
│ ├── service/ # 业务逻辑
│ ├── repository/ # 数据访问
│ └── model/ # 数据模型
├── pkg/ # 可复用公共包
│ └── utils/
├── api/ # API定义(proto/openapi)
├── configs/ # 配置文件
├── scripts/ # 构建/部署脚本
├── test/ # 集成测试
├── go.mod
├── go.sum
├── Makefile
└── Dockerfile
| 类别 | 推荐方案 | 替代方案 |
|---|---|---|
| Web框架 | Gin | Echo / Chi / Fiber |
| ORM | GORM | Ent / sqlx / sqlc |
| 配置 | Viper | koanf |
| 日志 | zap | zerolog / slog |
| 验证 | validator | go-playground/validator |
| 缓存 | go-redis | redigo |
| JWT | golang-jwt | — |
| Swagger | swag | — |
| 测试 | testify | — |
| Mock | gomock | testify/mock |
// 命名规范
// 包名: 小写单词, 不用下划线 package httputil
// 导出: 大写开头 func CreateUser()
// 未导出: 小写开头 func validateInput()
// 接口: -er后缀 type Reader interface{}
// 常量: 驼峰 const maxRetries = 3
// 枚举: 类型+常量 type Role int; const Admin Role = 0
// 错误处理规范
// 错误变量: Err前缀 var ErrNotFound = errors.New("...")
// 错误类型: Error后缀 type ValidationError struct{...}
// 包装: %w fmt.Errorf("查询失败: %w", err)
// 注释规范
// 导出符号必须有注释
// 注释以符号名开头 // CreateUser creates a new user.
// 包注释: doc.go // Package user handles user operations.
// 1. 输入验证 — 永远不信任用户输入
// 2. SQL注入 — 使用参数化查询
db.Query("SELECT * FROM users WHERE id = $1", id) // ✅
db.Query("SELECT * FROM users WHERE id = " + id) // ❌
// 3. XSS防护 — HTML转义
template.HTML(escape(userInput)) // 或使用html/template自动转义
// 4. CSRF — 使用token验证
// 5. 密码 — bcrypt/argon2哈希, 永不明文存储
hashed, _ := bcrypt.GenerateFromPassword([]byte(pwd), bcrypt.DefaultCost)
// 6. HTTPS — 生产环境必须
// 7. 日志脱敏 — 不记录密码/Token
log.Printf("user login: id=%d", userID) // ✅
log.Printf("password=%s", pwd) // ❌
// go.mod最佳实践
module github.com/yourorg/yourproject
go 1.22
// 直接依赖 — 项目直接使用的包
require (
github.com/gin-gonic/gin v1.9.1
gorm.io/gorm v1.25.0
)
// 间接依赖 — 自动管理, 不要手动编辑
require (
github.com/json-iterator/go v1.1.12 // indirect
)
// 替换 — 本地开发/ fork修复
replace github.com/original/pkg => ../local-fork
// 排除 — 排除有问题的版本
exclude github.com/broken/pkg v1.0.0