Как добавить буферы протокола в Swift?

У меня есть protobuf v2 в Swift, и я пытаюсь добавить его к другому протобуфу. Это то, что я пытаюсь:

let attachment = getAttachment(id: 987) //From cloud database
var protosData = NSMutableData(data: attachment)

items.forEach { //Some struct array of values
  guard let proto = try? MyProtoBuf.Builder()
      .setEpochMillis($0.date.epochMilliseconds)
      .setValue($0.value)
      .build() else { return }

  protosData.appendData(proto.data())
}

saveAttachment(protosData) //Store to cloud

Кажется, я похожа на то, что я искажаю данные, потому что получаю эту ошибку при ее чтении:

malloc: *** mach_vm_map(size=2749415424) failed (error code=3)
*** error: can't allocate region
*** set a breakpoint in malloc_error_break to debug

Возможно, это мое чтение обратно неверно, вот что я делаю, чтобы читать прилагаемые данные из хранилища:

extension GeneratedMessageProtocol {

  static func getStreamData(data: NSData) -> [Self] {
    var messages = [Self]()
    do {
        let inStream = NSInputStream(data:data)
        inStream.open()
        defer { inStream.close() }
        while inStream.hasBytesAvailable {
            var sizeBuffer: [UInt8] = [0,0,0,0]
            inStream.read(&sizeBuffer, maxLength: sizeBuffer.count)
            let data = NSData(bytes: sizeBuffer, length: sizeBuffer.count)
            let messageSize = data.uint32.littleEndian
            var buffer = Array<UInt8>(count: Int(messageSize), repeatedValue: 0)
            inStream.read(&buffer, maxLength: Int(messageSize))
            let messageData = NSData(bytes: buffer, length:Int(messageSize))
            messages.append(try self.parseFromData(messageData))
        }
    }
    catch {

    }
    return messages
  }
}

extension NSData {

  var uint32: UInt32 {
    get {
        var number: UInt32 = 0
        self.getBytes(&number, length: sizeof(UInt32))
        return number
    }
  }
}

И вот мое сообщение protobuf:

syntax = "proto2";

message MyProtoBuf {
    optional uint64 epochMillis = 1;
    optional uint32 value = 2;
}

Каков правильный способ добавления данных к существующему protobuf вместо того, чтобы поодиночке анализировать элементы массива, добавляя protobuf, а затем преобразовывая весь массив обратно в байты?

Ответ 1

Ваша часть чтения в порядке. вам не хватает разделителей при соединении прото-объектов. сначала вычислить и добавить разделитель к потоку, а затем прото-объект. затем сделайте это для каждого прото-объекта.

let attachment = getAttachment(id: 987)         //From cloud database
var arr: [UInt32] = [UInt32(attachment.length)] //Assuming attachment is NSData type
let delimiter = NSData(bytes: arr, length: arr.count * sizeof(UInt32))

let protosData = NSMutableData(data: delimiter)
protosData.appendData(attachment)

items.forEach {                                 //Some struct array of values
  guard let proto = try? MyProtoBuf.Builder()
      .setEpochMillis($0.date.epochMilliseconds)
      .setValue($0.value)
      .build() else { return }

  var array: [UInt32] = [UInt32(proto.data().length)]
  let delimit = NSData(bytes: array, length: arr.count * sizeof(UInt32))

  protosData.appendData(delimit)
  protosData.appendData(proto.data())
}

saveAttachment(protosData)                      //Store to cloud