Was ist der beste Weg, um Daten in einem sprachunabhängigen Binärformat zu serialisieren?

Question

Ich untersuche einen Mechanismus für die Serialisierung von Daten, die über einen Socket oder Shared-Memory in einem sprachunabhängigen Mechanismus weitergegeben werden. Ich zögere, XML zu verwenden, da diese Daten sehr strukturiert sind und die Geschwindigkeit der Kodierung/Dekodierung von entscheidender Bedeutung ist. Eine gute C-API, die frei lizenziert ist, ist wichtig, aber idealerweise sollte es Unterstützung für eine Tonne anderer Sprachen geben. Ich habe google's protocol buffers und ASN.1 angesehen. Bin ich auf dem richtigen Weg? Gibt es etwas Besseres? Sollte ich nur meine eigene gepackte Struktur implementieren und nicht nach einem Standard suchen?

Answer 1

Angesichts Ihrer Anforderungen würde ich mit Google Protocol Buffers gehen. Es klingt, als ob es ideal für Ihre Anwendung geeignet ist.

Answer 2

Check out Hessian

Answer 3

Sie XDR in Erwägung ziehen könnte. Es hat eine RFC. Ich habe es benutzt und hatte nie irgendwelche Leistungsprobleme damit. Es wurde in ONC RPC verwendet und hat ein und kommt mit einem Tool namens rpcgen. Es ist auch einfach, einen Generator selbst zu erstellen, wenn Sie nur Daten serialisieren wollen (was ich aus Gründen der Portabilität gemacht habe, dauerte einen halben Tag). Es gibt eine Open Source C-Implementierung, aber sie kann bereits in einer Systembibliothek enthalten sein, sodass Sie die Quellen nicht benötigen.

ASN.1 erschien mir immer ein bisschen barock, aber abhängig von Ihren tatsächlichen Bedürfnissen könnte geeigneter sein, da es XDR einige Einschränkungen gibt.

Answer 4

Es gibt auch Binary XML aber es scheint noch nicht stabilisiert. Der Artikel, zu dem ich verlinke, enthält eine Reihe von Links, die von Interesse sein könnten.

Answer 5

Eine andere Option ist SNAC/TLV, die von AOL in seinem Oscar/AIM-Protokoll verwendet wird.

Answer 6

JSON ist wirklich mein Liebling für diese Art von Sachen. Ich habe jedoch keine vorherige Erfahrung mit binären Sachen drin. Bitte posten Sie Ihre Ergebnisse, wenn Sie JSON verwenden möchten!

Answer 7

Thrift ist ein Binärformat von Facebook erstellt. Here's a comparison mit Google-Protokoll-Puffer.

Answer 8

Überprüfen Sie auch Muscle. Obwohl es ziemlich viel ist, serialisiert es in einem binären Format.

Answer 9

Ich wollte nur ASN.1 in diesen Mix einwerfen. ASN.1 ist ein Formatstandard, aber es gibt Bibliotheken für die meisten Sprachen, und die C-Schnittstelle über asn1c ist viel sauberer als die C interface for protocol buffers.

Answer 10

Wenige Dings Sie

1. Storage 
2. Encoding Style (1 byte 2 byte) 
3. TLV standards 

ASN.1-Parser ist das gut für binäre Repräsentationen der beste Teil ASN.1 beachten müssen, ist eine gut etablierte Technologie, die weit verbreitet ist sowohl innerhalb der ITU-T und außerhalb davon. Die Notation wird von einer Reihe von Softwareanbietern unterstützt.