首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >问答首页 >获取Google BigQuery表模式的锁或拒绝不向后兼容的模式

获取Google BigQuery表模式的锁或拒绝不向后兼容的模式
EN

Stack Overflow用户
提问于 2016-06-03 23:03:55
回答 1查看 1K关注 0票数 0

是否有方法获取表模式的锁和/或拒绝不向后兼容的表模式updates|patches

我有一个分布式应用程序,在这个应用程序中,孤立的进程可以写入同一个bigquery表。架构只以向后兼容的方式更改。如果进程处理的消息产生新的架构版本,则该流程将修补目标表。但是,在竞争条件下,我从来不想用更低版本的模式进行修补。

理想的场景如下:

  • 获取表的架构上的锁
    • 如果表的当前架构的版本低于最新的架构,并且/或不是最新架构字段的超集,则用最新架构替换当前架构。
    • 如果当前架构是比该参与者内存中的最新架构更晚的版本,则拉下当前架构并进行升级。

  • 释放锁,以便其他参与者能够获取和重复过程。

谢谢!

EN

回答 1

Stack Overflow用户

发布于 2016-06-04 03:34:47

据我所知- BigQuery将不允许您用向后不兼容的模式修补表。您将得到错误,说是特定的字段丢失或类型被更改或类似的东西。

在BigQuery中,只能向表或记录的末尾添加新列。我可能错过了一些具体的细节,但高层次的应该是正确的,应该解决您的关切,我认为。

此外,还需要注意的是,BigQuery是为大量数据集的交互式分析而量身定做的,而不是针对特定于事务的主题(如锁定)而设计的。

票数 3
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/37624651

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档