1

我正在尝试编写一些简单的生产者来将消息写入 kafka 我已经下载了 kafka0.7

运行kafka服务器，生产者和消费者

>   bin/kafka-server-start.sh config/server.properties
>   bin/kafka-console-consumer.sh --zookeeper zooserver:2181 --topic test --from-beginning
>   bin/kafka-console-producer.sh --zookeeper zooserver:2181 --topic test

一切正常！

然后我创建了简单的消费者，它也可以工作。

SimpleConsumer consumer = new SimpleConsumer("172.21.110.134", 9092, 10000, 1024000);
…
ByteBufferMessageSet messages = consumer.fetch(fetchRequest);
System.out.println("consumed: " + Utils.toString(msg.message().payload(), "UTF-8"));

但是下面的生产者总是抛出错误

ProducerConfig config = new ProducerConfig(props);
…
Producer<String, Message> producer = new Producer<String, Message>(config);
producer.send(new ProducerData<String, Message>("test", new Message("Hello World".getBytes())));

得到以下异常

Exception in thread "main" java.lang.ClassCastException: kafka.message.Message cannot be cast to java.lang.String
            at kafka.serializer.StringEncoder.toMessage(Encoder.scala:30)
            at kafka.producer.ProducerPool$$anonfun$send$1$$anonfun$3$$anonfun$apply$1.apply(ProducerPool.scala:107)

我在java代码中使用maven依赖项

<dependency>
      <groupId>com.twitter</groupId>
         <artifactId>kafka_2.9.2</artifactId>
         <version>0.7.0</version>
     </dependency>

    <dependency>
         <groupId>org.scala-lang</groupId>
         <artifactId>scala-library</artifactId>
         <version>2.9.2</version>
     </dependency>

请帮忙，我做错了什么？为什么我不能通过简单的 java 代码编写？

4

1 回答 1

11

问题是您配置了错误的序列化程序，这应该是

props.put("serializer.class", "kafka.serializer.DefaultEncoder");

不是“字符串编码器”

于 2013-06-20T14:11:18.303 回答