我有关于库杜和嵌套字段的问题。
卡夫卡的JSON是这样的:
{
  "ts": 32,
  "status": "success",
  "uid": "3232",
  "url": "http://some_url",
  "syncpixel": "http://some_url",
  "dfp": {
    "DFP_UABrowser": "Chrome 61",
    "DFP_UAOperatingSystem": "Windows 7 ver.7.0",
    "JavascriptDisplayData_Screen_W_x_H": "1440 x 900",
    "Native_client": true
  }
}dfp字段有一个嵌套的对象,我想通过水槽将这个对象插入到库中。
我知道kudu不支持嵌套字段,并且支持二进制列。我该怎么办?
dfp转换为二进制格式并读取,例如scala火花?发布于 2018-11-11 10:59:03
如果您使用spark/scala,那么当您拥有适当的安装集群时,流将不会出现并发出问题。通过火花读取整个json,并使用“爆炸”功能将json压平。这会让生活更轻松。
https://stackoverflow.com/questions/47330621
复制相似问题