在 Swift 中增量写入大型文本文件的最佳方法

关于记忆，请看邓肯·C的答案.您需要一个自动释放池.但在速度方面，你有一个小问题和一个大问题.

小问题是这一行:

    handle.write(s.data(using: .ascii)!)

重写可以节省大约40%的时间(在我的测试中，从27秒到17秒):

    handle.write(Data(s.utf8)) 

字符串通常存储在UTF8内部.虽然ASCII是其中的一个完美子集，但您的代码需要判断任何不是ASCII的内容.使用.utf8通常只能直接获取内部缓冲区.它还避免了创建和展开可选的.

但17分仍然比1-2分多得多.这要归功于你的大问题.

每次调用write都必须将数据一路送到操作系统的文件缓冲区.虽然不是一直到磁盘，但这仍然是一个昂贵的操作.除非数据非常宝贵，否则您通常希望将其分成更大的块(4k非常常见).如果这样做，写入时间将降至1.5秒:

let bufferSize = 4*1024
var buffer = Data(capacity: bufferSize)
for i in 0..<size {
    autoreleasepool {
        let s = "\(i)\n"
        buffer.append(contentsOf: s.utf8)
        if buffer.count >= bufferSize {
            handle.write(buffer)
            buffer.removeAll(keepingCapacity: true)
        }
    }
}
// Write the final buffer
handle.write(buffer)

这与我系统上" Big Data "功能的1.1版本"非常接近".仍然有大量的内存分配和清理工作在进行.根据我的经验，至少在最近，[UInt8]比数据快得多.我不确定这是否总是正确的，但我最近在Mac上的所有测试都是这样的.因此，使用较新的write(contentsOf:)界面编写代码如下:

let bufferSize = 4*1024
var buffer: [UInt8] = []
buffer.reserveCapacity(bufferSize)
for i in 0..<size {
    autoreleasepool {
        let s = "\(i)\n"
        buffer.append(contentsOf: s.utf8)
        if buffer.count >= bufferSize {
            try? handle.write(contentsOf: buffer)
            buffer.removeAll(keepingCapacity: true)
        }
    }
}
// Write the final buffer
try? handle.write(contentsOf: buffer)

这比 Big Data 功能要高出faster%，因为它不需要生成数据.(我的机器上有830毫秒)

但等等，事情会变得更好.这段代码不需要自动释放池，如果删除它，我可以在730ms内编写此文件.

let bufferSize = 4*1024
var buffer: [UInt8] = []
buffer.reserveCapacity(bufferSize)
for i in 0..<size {
    let s = "\(i)\n"
    buffer.append(contentsOf: s.utf8)
    if buffer.count >= bufferSize {
        try? handle.write(contentsOf: buffer)
        buffer.removeAll(keepingCapacity: true)
    }
}
// Write the final buffer
try? handle.write(contentsOf: buffer)

但是，Python又如何呢？为什么它不需要缓冲区来提高速度？因为默认情况下，它会为您提供缓冲区.您的open使用8k缓冲区调用returns a BufferedWriter，其工作原理与上面的代码大致相似.您需要在二进制模式下写入代码，并通过buffering=0将其关闭.详细信息请参见the docs on open.