如何在ConsumerRecord中获取字段

Question

我写了一个python脚本：

#!/usr/bin/env python
from kafka import KafkaConsumer
consumer = KafkaConsumer('dimon_tcpdump',group_id='zhg_group',bootstrap_servers='192.168.100.9:9092')
for msg in consumer:
    print msg
    # process mes here

msg的输出就像：

ConsumerRecord(topic=u'ditopic', partition=0, offset=6280, timestamp=None, timestamp_type=None, key=None, value='myvalue')

我知道输出是namedtuple形式。

我的问题是：如何获得特定领域的ConsumerRecord？例如，我想将值字符串分配给变量。

Answer 1

这可能与您反序列化数据的方式有关。例如，如果您想从msg. 您可以使用以下Consumer方式初始化：

value_deserializer=lambda m: json.loads(m.decode('utf-8'))

所以你的代码看起来像这样：

#!/usr/bin/env python
from kafka import KafkaConsumer
consumer = KafkaConsumer(
   'dimon_tcpdump',
    group_id='zhg_group',
    value_deserializer=lambda m: json.loads(m.decode('utf-8')),
    bootstrap_servers='192.168.100.9:9092'
    )
for msg in consumer:
    print msg.value
    # process mes here