How to read a large JSON file ?"JSONFile": {"S": Grouper/1904/1/private/drafts/D1_2/siepon_D1_2/siepon_C11_D1_2_diff.pdf.jsonJSONFile": {"S": "Mentor/47200043/Public/07/11-07-1984-05-00
我正在尝试使用AWS Glue将一个20 to的JSON gzip文件转换为parquet。LOG.WARN: Loading one large unsplittable file s3://aws-glue-data.json.gz with only one我想知道是否有办法分割/块文件?我知道我可以用熊猫来做这件事,但不幸的是,这花费了太多的时间(12+小时)。