登录
首页 >  Golang >  Go问答

对自定义对象进行字节/字节数组序列化/编码的方法是什么?

来源:stackoverflow

时间:2024-03-04 19:27:29 209浏览 收藏

小伙伴们有没有觉得学习Golang很有意思?有意思就对了!今天就给大家带来《对自定义对象进行字节/字节数组序列化/编码的方法是什么?》,以下内容将会涉及到,若是在学习中对其中部分知识点有疑问,或许看了本文就能帮到你!

问题内容

我有以下 python 类:

class header:
  def __init__(self, id, len):
    self.id = id
    self.len = len

h = header(1, 10)

如何将此类的实例 h 序列化/编码为 bytesbytearray(例如可以写入 socket)?

为了提供更多的视角,我需要将此对象写入 unix 域套接字,其中 c++ 程序正在侦听接收上述对象(它定义了上述 struct ,与上面完全相同,具有相同数量/类型的字段) 。通过 pickle.dump(...) 进行编码不起作用。

c++ 结构是:

typedef struct header {
  uint32_t id;
  uint32_t len;
}

事实上,我可以从 go 与这个 c++ 程序进行交互,如下所示。

import (
  "bytes"
  "encoding/binary"
)

type Header struct {
  ID uint2
  Len uint32
}

// output of this function is written to the socket opened by C++ and it works!!
func GetHeaderBuf() *bytes.Buffer, error{
  hdrBuf := new(bytes.Buffer)
  hdr := Header{1, 10}
  if err := binary.Write(hdrBuf, binary.LittleEndian, hdr); err != nil {
    return nil, err
  }
  return hdrBuf, nil
}

我正在寻找是上面 go 代码行 binary.write(...) 的 python 等效项。


解决方案


这称为 Serialization

在 python 中,您可以使用标准库 pickle 模块自动执行(反)序列化,或手动序列化。在后一种情况下,您可以决定要编码的各个属性以及对它们进行编码的方式。然后 struct 模块执行实际的字节转换。

pickle方式:

data = pickle.dumps(h)
h2 = pickle.loads(data)

手动方式:

假设我们需要 2 个字节来存储 id(小于 65636)和 4 个字节来存储 len。我们可以做

data = struct.pack('>hi', h.id, h.len)
h2 = header(*struct.unpack('>hi', data))

pickling 使用内部格式,只能在 python 应用程序之间使用。另一方面,struct 特别适合异构应用程序。这里 > 表示整数值应该使用所谓的网络顺序(大)字节序。这简化了不同架构之间交换值的过程。

如果另一部分使用c语言,struct无疑是最佳选择。

对。首先,我想指出的是:

     ID = 0                                                                                                  
     Len = 0

完全没用。它所做的只是在类上添加两个属性。除此之外,您不尊重 python 命名约定:

  • 属性为 snake_cased
  • 没有内置阴影(idlen 是)。

无论如何,有很多种方法可以将内容编码为字节,因此您首先需要决定要使用哪种交换协议,这取决于协议另一端的内容套接字。

从用户体验的角度来看,最简单的解决方案是 pickle,序列化对象是事情的全部要点,它可以开箱即用,但它也是最危险的(因为 pickle 是与 python 相邻的字节码,所以 pickle输入本质上是远程代码执行),并且它 100% 仅限 python。

另一端是 json,它受到各种语言的良好支持,但对 python 一无所知,因此您需要一个定制的编码器(如果是的话,另一端可能需要一个定制的解码器)也是python)。

除了 stdlib 不直接支持之外,还有一些第三方库(例如 messagepack、flatbuffers...),它们有各种权衡。

以上就是本文的全部内容了,是否有顺利帮助你解决问题?若是能给你带来学习上的帮助,请大家多多支持golang学习网!更多关于Golang的相关知识,也可关注golang学习网公众号。

声明:本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除
相关阅读
更多>
最新阅读
更多>
课程推荐
更多>