使用Google视频智能API处理/分析S3对象的最佳方法是什么?我目前的计划是将S3对象复制到(GCS),然后调用API。要从S3复制到GCS,看起来是唯一的选择。
我想要的流量是:
object.
是否有更好的选择可以避免抄袭?如果不是,传输服务API是否是复制单个对象的正确选择?
谢谢。
发布于 2020-02-27 02:52:07
如果您必须将数据存储在S3中作为权威来源,那么我认为您当前的计划可能是最好的。如果您可以使用GCS作为您的家的数据,这显然会使事情更容易为这一特定的任务。
Google的API希望能够轻松、快速地访问数据(而不是试图从一些远程服务(如S3)中提取数据)。这意味着保存这些数据的唯一合理的地方(从谷歌的角度来看)是在GCS中。
的传输服务绝对是正确的选择,如果这对您的用例有意义,或者根据需要触发一次性传输,您就可以安排定期传输。在S3作为数据源的情况下,还可以应用筛选器来包含或排除(例如,目录前缀),并根据其上一次修改时间限制传输(如S3报告的)。
在上面,您可以看到如何过滤文件以通过前缀传输,还可以看到仅传输在过去24小时内更改的文件。
https://stackoverflow.com/questions/60420847
复制相似问题