Go 中的切片分块
您想要将大约 210 万个字符串的切片分成均匀分布的块。提供的代码段采用了复制第一个块的技术,而不是均匀分布字符串。
解决方案在于将日志切片附加到分割的切片上,而不是创建新切片。通过根据 CPU 数量和分片长度计算 chunk 大小,日志可以均匀分布在 chunk 上。
修改后的代码:
var divided [][]string chunkSize := (len(logs) + numCPU - 1) / numCPU for i := 0; i < len(logs); i += chunkSize { end := i + chunkSize if end > len(logs) { end = len(logs) } divided = append(divided, logs[i:end]) }
这种方法可以确保字符串尽可能均匀地分布在各个块中,从而最大限度地提高性能和系统资源的利用率。
以上是如何在 Go 中有效地对一大片字符串进行分块?的详细内容。更多信息请关注PHP中文网其他相关文章!