Skip to main content
 首页 » 编程设计

python之python中的数据格式二进制模式描述和解码

2025年04月02日15mate10pro

我正在创建一些用于解码各种二进制格式的 python 脚本。 每种格式都有很多不同的记录,并且相当多的数据被编码在特定字节内的特定位范围内。 因此,我正在寻找一个 python 包,它可以将解码代码和格式规范巧妙地分开,这样代码就不会变得太乱。 理想情况下,它会让我保留不同版本的格式。 下面是我正在寻找的内容的非常粗略的概述。

示例 my_data_format.xml:

<format version="1A"> 
  <record name="My first record"> 
    <ignore bytes="2" /> 
    <field name="A simple number" bytes="1" convert_to="int" /> 
    <field name="A simple float" bytes="4" convert_to="float" /> 
    <array name="A list of floats" length="3"> 
      <field bytes="4" convert_to="float" 
    </array> 
    <field bytes="2"> 
      <ignore bits="5" /> 
      <bitfield name="First bit-field" num_bits="6" convert_to="uint8" /> 
      <bitfield name="Second bit-field" num_bits="5" convert_to="float" /> 
    </field> 
  </record> 
</format> 

示例 python 脚本 my_data_reader.py:

from binary_schema import load_schema 
 
schema = load_schema('my_data_format.xml') 
 
with open(̈́'myfile.bin', 'rb') as f: 
  decoded_data = schema.read_record_from_stream('Record header', f) 
 
print(decoded_data) 

这会产生一个字典:

{'A simple float': 3.234, 
 'A simple number': 3, 
 'A list of floats': [1., 2., 3.], 
 'First bit-field': 3, 
 'Second bit-field': 2.0} 

有这样的事情吗?

我已经看过一些东西了:

  • 我知道类似 protocol buffers 的事情对指定记录很有用,但据我所知,它不支持指定位域及其解释。

  • 有 DFDL这似乎正是我所需要的,但我只看到了一个 Java 客户端,它看起来像是一个庞大的软件包(尽管在某处显然有 C 版本)。

  • 我当前的实现使用 construct这很好用,但感觉比从文件加载架构要麻烦一些

请您参考如下方法:

查看 https://kaitai.io/ “Kaitai Struct:一种开发二进制结构解析器的新方法。”

我想你会发现它会做你需要的,模式不是 XML,但我认为格式也比 XML 灵活得多。