我想从我们的App应用程序导出一些数据-当前的数据集大约是70k (将增长)实体,需要过滤。
过滤是通过一个cron作业(应用程序引擎任务)完成的,一次批处理1k。是否有一种机制允许我向现有文件中添加行,而不是批量上传(就像要求的那样)?
发布于 2014-05-27 14:47:57
您可以使用Datastore API从自己的PC或Compute实例访问数据存储,并将所有实体写入硬盘驱动器(或Compute实例)。这与在App实例中使用Datastore不同,但只是略有不同,因此编写代码应该没有问题。
但是,我必须注意到,将100个文件写入云存储中,每个文件中有1000个实体,这对我来说是一个很好的解决方案。无论您以后想要对这些记录做什么,拥有100个较小的文件而不是一个大的超级文件可能是个好主意。
https://stackoverflow.com/questions/23892380
复制相似问题