登录
首页 >  Golang >  Go问答

代理无法验证记录的 Kafka 架构注册表

来源:stackoverflow

时间:2024-02-25 20:09:23 174浏览 收藏

珍惜时间,勤奋学习!今天给大家带来《代理无法验证记录的 Kafka 架构注册表》,正文内容主要涉及到等等,如果你正在学习Golang,或者是对Golang有疑问,欢迎大家关注我!后面我会持续更新相关内容的,希望都能帮到正在学习的大家!

问题内容

我正在使用 Kafka 架构注册表验证架构。问题是,即使我输入了正确的架构,我仍然收到错误 Broker: Broker failed to verify record.

confluence.value.schema.validation 设置为 true,以便可以在当前代理级别检查值的架构。

我设置的架构和我发送的数据如下。

{
  "$schema": "http://json-schema.org/draft-07/schema#",
  "additionalProperties": false,
  "description": "Sample schema to help you get started.",
  "properties": {
    "test": {
      "type": "string"
    }
  },
  "title": "schema_test",
  "type": "object"
}
{"test": "test1"}

另外,我使用go发送数据,数据的代码如下。

// main

func main() {
    kafka.ProduceData("schema_test", []byte(`{"test": "test1"}`))
}
// kafka
func ProduceData(topic string, data []byte) {

    conf := ReadConfig()

    p, err := kafka.NewProducer(&conf)

    if err != nil {
        fmt.Printf("Failed to create producer: %s", err)
        os.Exit(1)
    }

    defer p.Close()

    // Go-routine to handle message delivery reports and
    // possibly other event types (errors, stats, etc)
    go func() {
        for e := range p.Events() {
            switch ev := e.(type) {
            case *kafka.Message:
                if ev.TopicPartition.Error != nil {
                    fmt.Printf("Failed to deliver message: %v\n", ev.TopicPartition)
                } else {
                    fmt.Printf("Produced event to topic %s: key = %-10s value = %s\n",
                        *ev.TopicPartition.Topic, string(ev.Key), string(ev.Value))
                }
            }
        }
    }()

    p.Produce(&kafka.Message{
        TopicPartition: kafka.TopicPartition{Topic: &topic, Partition: kafka.PartitionAny},
        Value:          data,
    }, nil)

    // Wait for all messages to be delivered
    p.Flush(15 * 1000)
}

正确答案


对于经纪人如何实际验证数据似乎存在误解。它按预期工作。您需要一个架构 ID。您只是发送有关主题的纯 JSON,没有 ID。注册表上的架构并不重要,重要的是它的 ID。

来自文档

更具体地说,您添加到注册表的模式只是主题上可能存在的许多“版本”之一(例如 topic-value)。每个版本都有一个唯一的 ID。验证不仅仅使用最新版本;该 ID 在客户端进行编码。

请参阅使用 JSON 模式进行生成的 Confluence 示例(它本身应该进行记录验证)。

https://github.com /confluenceinc/confluence-kafka-go/blob/master/examples/json_ Producer_example/json_ Producer_example.go

代理端验证只是为了防止错误序列化的数据或“毒丸”,正如您现在所做的那样。

好了,本文到此结束,带大家了解了《代理无法验证记录的 Kafka 架构注册表》,希望本文对你有所帮助!关注golang学习网公众号,给大家分享更多Golang知识!

声明:本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除
相关阅读
更多>
最新阅读
更多>
课程推荐
更多>