最美情侣中文字幕电影,在线麻豆精品传媒,在线网站高清黄,久久黄色视频

歡迎光臨散文網 會員登陸 & 注冊

如何將Kafka中的二進制數(shù)據(jù)轉換為Java或者Scala對象?

2023-07-11 10:07 作者:ingemar-  | 我要投稿

Flink Kafka Consumer 需要知道如何將 Kafka 中的二進制數(shù)據(jù)轉換為 Java 或者 Scala 對象。KafkaDeserializationSchema 允許用戶指定這樣的 schema,每條 Kafka 中的消息會調用 T deserialize(ConsumerRecord<byte[], byte[]> record) 反序列化。

為了方便使用,F(xiàn)link 提供了以下幾種 schemas:

  • SimpleStringSchema:按照字符串方式序列化、反序列化

  • TypeInformationSerializationSchema(和 TypeInformationKeyValueSerializationSchema) 基于 Flink 的 TypeInformation 創(chuàng)建 schema。如果該數(shù)據(jù)的讀和寫都發(fā)生在 Flink 中,那么這將是非常有用的。此 schema 是其他通用序列化方法的高性能 Flink 替代方案。

  • JsonDeserializationSchema(和 JSONKeyValueDeserializationSchema)將序列化的 JSON 轉化為 ObjectNode 對象,可以使用 objectNode.get("field").as(Int/String/...)() 來訪問某個字段。KeyValue objectNode 包含一個含所有字段的 key 和 values 字段,以及一個可選的"metadata"字段,可以訪問到消息的 offset、partition、topic 等信息。

  • AvroDeserializationSchema 使用靜態(tài)提供的 schema 讀取 Avro 格式的序列化數(shù)據(jù)。它能夠從 Avro 生成的類(AvroDeserializationSchema.forSpecific(...))中推斷出 schema,或者可以與 GenericRecords 一起使用手動提供的 schema(用 AvroDeserializationSchema.forGeneric(...))。此反序列化 schema 要求序列化記錄不能包含嵌入式架構!

要使用此反序列化 schema 必須添加以下依賴:


如何將Kafka中的二進制數(shù)據(jù)轉換為Java或者Scala對象?的評論 (共 條)

分享到微博請遵守國家法律
和林格尔县| 渝北区| 米脂县| 义马市| 夏邑县| 达州市| 渭南市| 大理市| 彝良县| 会理县| 揭阳市| 无为县| 巴里| 揭东县| 扎鲁特旗| 彩票| 沙坪坝区| 公安县| 宜春市| 鄂尔多斯市| 登封市| 尚志市| 房产| 中方县| 四平市| 谢通门县| 白玉县| 句容市| 贡嘎县| 苍山县| 彰化县| 富源县| 太仓市| 泸水县| 安吉县| 天全县| 东乌珠穆沁旗| 高陵县| 临江市| 广东省| 宁强县|