我的事件日志实际上存储在Google Big Query表中。目前,我正在将json文件转储到Google存储桶中,并将其下载到本地驱动器。然后使用logstash将json文件从本地驱动器移动到elastic搜索引擎。
现在,我正试图通过在google大查询和弹性搜索之间建立联系来自动化这个过程。根据我所读到的,我了解到有一个输出连接器,它将来自elastic search的数据发送到Google大查询,但反之亦然。我只是想知道是否应该将json文件
在Google Data Catalog中,我尝试创建一个新的入口组,然后创建一个配置了存储桶和文件模式的文件集条目。我没有故意在文件集中定义模式,因为我希望数据目录自动在文件内/从文件中找到技术元数据。一切都是通过Google控制台UI进行设置的。 Data Catalog找不到与存储桶中的文件相关的元</e