所以我有一个GCP桶,我必须上传文件到它。问题是,我有1000万个文件,我想上传到桶(每个文件大小为50 to ),我有一个8小时或更短的时间限制。目前,我正在使用一个Java程序()并在1000个映像上测试它,它在大约300毫秒内上传每个文件,但是如果我使用多线程,我已经能够将平均时间缩短到40毫秒(使用20个线程)。我可以增加到60个线程,并将时间进一步减少到15-20毫秒,但同时也面临三个问题:
当我超过25个线程时,它会抛出“com.google.cloud.storage.StorageException: C