Go批量处理性能瓶颈主因是I/O阻塞、协程滥用和内存分配；应使用sync.Pool复用高频小对象（如[]byte、json.Decoder），避免GC压力，注意重置状态并检查nil；文本解析优先bufio.NewReader+定长切片，预分配结构化切片。
Go 程序批量处理性能瓶颈，90% 出现在 I/O 阻塞、协程滥用和内存分配上，而不是算法本身。
用 sync.Pool 复用高频小对象，避免 GC 压力
批量处理中频繁创建 []byte、json.Decoder、bufio.Reader 等对象，会显著抬高 GC 频率。Go 1.13+ 的 sync.Pool 是最直接的缓解手段。
- 不要复用含内部状态的对象（如已调用过
Read()的bufio.Reader），需在Put前重置缓冲区或字段 - 池中对象生命周期由 GC 控制，不能依赖
Get一定返回非 nil；始终做空值检查 - 示例：解析 JSON 流时复用
json.Decoder，但每次UseNumber()和DisallowUnknownFields()需重新设置
批量读写优先走 bufio + 定长切片，别用 fmt.Scanf 或逐行 Scanner
处理 CSV、日志、TSV 等文本批量数据时，bufio.Scanner 默认 64KB 缓冲且不可控，fmt.Sscanf 解析开销大，二者都会成为吞吐瓶颈。
- 用
bufio.NewReader+ReadSlice('\n')或ReadBytes('\n')手动控制缓冲，配合bytes.FieldsFunc或strings.SplitN切分 - 对结构化数据（如固定列 CSV），预分配
[]string切片并复用，避免每次make([]string, N) - 写入文件时，用
bufio.NewWriterSize(f, 1 设置 1MB 缓冲，再批量WriteString，比逐行fmt.Fprintln快 3–5 倍
并发控制别无脑开 go，用 worker pool 限流 + channel 流控
常见错误是 for 循环里直接 go process(item)，导致协程数爆炸、内存溢出或下游服务被打挂。真实场景需要可预测的并发度与背压。
立即学习“go语言免费学习笔记（深入）”；
- 用带缓冲的
chan struct{}或semaphore.NewWeighted(N)（golang.org/x/sync/semaphore）控制并发上限 - 输入 channel 设为有缓冲（如
make(chan *Item, 1000)），防止生产者阻塞；处理结果用另一个 channel 收集，避免锁竞争 - 注意：数据库操作、HTTP 调用等外部依赖，其连接池大小必须与 worker 数量匹配，否则线程全卡在
dial或acquire conn
用 unsafe.Slice（Go 1.17+）或 reflect.SliceHeader 零拷贝转换字节流
当从文件或网络读取二进制数据（如 Protobuf、Parquet、自定义 binary 协议）后需转成 []int32、[]float64 时，传统 binary.Read 或循环赋值极慢。
- 若数据内存布局对齐且可信（如 mmap 文件或 socket recv buffer），可用
unsafe.Slice(*(*[1 - Go 1.17+ 推荐用
unsafe.Slice替代旧式reflect.SliceHeader操作，更安全且不触发 vet 报警 - ⚠️ 禁止对非 owned 内存（如
http.Response.Body返回的临时[]byte）做零拷贝转换，生命周期无法保证
真正卡住批量性能的，往往不是“怎么并发”，而是“谁在偷偷分配内存”和“谁把数据从内核态拷了三次”。盯住 pprof 的 allocs 和 goroutines 图，比调协程数管用得多。
