blocks|key|152943|text|这可能是因为您的CSV文件中嵌入了单引号或双引号。如果您的CSV文件是制表符分隔的，请尝试以以下方式打开它：|type|unstyled|depth|inlineStyleRanges|entityRanges|data|152944|c+=+csv.reader(f,+delimiter='\t',+quoting=csv.QUOTE_NONE)|code-block|syntax|javascript|152945|entityMap^0|0|0^^$0|@$1|2|3|4|5|6|7|I|8|@]|9|@]|A|$]]|$1|B|3|C|5|D|7|J|8|@]|9|@]|A|$E|F]]|$1|G|3|-4|5|6|7|K|8|@]|9|@]|A|$]]]|H|$]]

This could be because your CSV file has embedded single or double quotes. If your CSV file is tab-delimited try opening it as:

<pre><code>c = csv.reader(f, delimiter='\t', quoting=csv.QUOTE_NONE)
</code></pre>

blocks|key|371184|text|有时，一行包含双引号列。当csv读取器尝试读取此行时，无法理解列的末尾并触发此提升。解决方案如下：|type|unstyled|depth|inlineStyleRanges|entityRanges|data|371185|reader+=+csv.reader(cf,+quoting=csv.QUOTE_MINIMAL)|code-block|syntax|javascript|371186|entityMap^0|0|0^^$0|@$1|2|3|4|5|6|7|I|8|@]|9|@]|A|$]]|$1|B|3|C|5|D|7|J|8|@]|9|@]|A|$E|F]]|$1|G|3|-4|5|6|7|K|8|@]|9|@]|A|$]]]|H|$]]

Sometimes, a row contain double quote column. When csv reader try read this row, not understood end of column and fire this raise.
Solution is below:

<pre><code>reader = csv.reader(cf, quoting=csv.QUOTE_MINIMAL)
</code></pre>

blocks|key|153021|text|下面是检查电流限制的方法|type|unstyled|depth|inlineStyleRanges|entityRanges|data|153022|csv.field_size_limit()|code-block|syntax|javascript|153023|Out20:+131072|153024|下面是增加限制。将其添加到代码中|153025|csv.field_size_limit(100000000)|153026|再次尝试检查限制|153027|153028|Out22:+100000000|153029|现在您不会收到错误"_csv.Error:字段大于字段限制(131072)“|153030|entityMap^0|0|0|0|0|0|0|0|0|0^^$0|@$1|2|3|4|5|6|7|V|8|@]|9|@]|A|$]]|$1|B|3|C|5|D|7|W|8|@]|9|@]|A|$E|F]]|$1|G|3|H|5|6|7|X|8|@]|9|@]|A|$]]|$1|I|3|J|5|6|7|Y|8|@]|9|@]|A|$]]|$1|K|3|L|5|D|7|Z|8|@]|9|@]|A|$E|F]]|$1|M|3|N|5|6|7|10|8|@]|9|@]|A|$]]|$1|O|3|C|5|D|7|11|8|@]|9|@]|A|$E|F]]|$1|P|3|Q|5|6|7|12|8|@]|9|@]|A|$]]|$1|R|3|S|5|6|7|13|8|@]|9|@]|A|$]]|$1|T|3|-4|5|6|7|14|8|@]|9|@]|A|$]]]|U|$]]

Below is to check the current limit

<pre><code>csv.field_size_limit()
</code></pre>

Out[20]: 131072

Below is to increase the limit. Add it to the code

<pre><code>csv.field_size_limit(100000000)
</code></pre>

Try checking the limit again

<pre><code>csv.field_size_limit()
</code></pre>

Out[22]: 100000000

Now you won't get the error "_csv.Error: field larger than field limit (131072)"

blocks|key|153052|text|找到通常放在.cassandra目录下的cqlshrc文件。|type|unstyled|depth|inlineStyleRanges|entityRanges|data|153053|在附加文件中，|153054|[csv]
field_size_limit+=+1000000000|code-block|syntax|javascript|153055|entityMap^0|0|0|0^^$0|@$1|2|3|4|5|6|7|K|8|@]|9|@]|A|$]]|$1|B|3|C|5|6|7|L|8|@]|9|@]|A|$]]|$1|D|3|E|5|F|7|M|8|@]|9|@]|A|$G|H]]|$1|I|3|-4|5|6|7|N|8|@]|9|@]|A|$]]]|J|$]]

Find the cqlshrc file usually placed in .cassandra directory.

In that file append,

<pre><code>[csv]
field_size_limit = 1000000000
</code></pre>

blocks|key|371251|text|您可以在pandas中使用read_csv跳过这些行。|type|unstyled|depth|inlineStyleRanges|offset|length|style|CODE|entityRanges|data|371252|import+pandas+as+pd

data_df+=+pd.read_csv('data.csv',+error_bad_lines=False)|code-block|syntax|javascript|371253|entityMap^0|4|6|D|8|0|0^^$0|@$1|2|3|4|5|6|7|M|8|@$9|N|A|O|B|C]|$9|P|A|Q|B|C]]|D|@]|E|$]]|$1|F|3|G|5|H|7|R|8|@]|D|@]|E|$I|J]]|$1|K|3|-4|5|6|7|S|8|@]|D|@]|E|$]]]|L|$]]

You can use <code>read_csv</code> from <code>pandas</code> to skip these lines.

<pre class="lang-py prettyprint-override"><code>import pandas as pd

data_df = pd.read_csv('data.csv', error_bad_lines=False)
</code></pre>

I have a script reading in a csv file with very huge fields:

<pre><code># example from http://docs.python.org/3.3/library/csv.html?highlight=csv%20dictreader#examples
import csv
with open('some.csv', newline='') as f:
 reader = csv.reader(f)
 for row in reader:
 print(row)
</code></pre>

However, this throws the following error on some csv files:

<pre><code>_csv.Error: field larger than field limit (131072)
</code></pre>

How can I analyze csv files with huge fields? Skipping the lines with huge fields is not an option as the data needs to be analyzed in subsequent steps.

_csv.Error: field larger than field limit (131072)

翻译质量差，导致语言生硬或混乱。

没有提供实际的解决方法或示例。

解答不清晰，无法理解或解决问题。

页面排版不美观，阅读体验差。

文章

问答

视频

学习中心

腾讯云实验室

直播

竞赛

腾讯云代码分析专区

腾讯iOA零信任安全管理系统专区

腾讯云架构师技术同盟交流圈

腾讯云数据库专区

腾讯云顾问专区

腾讯云原生专区

腾讯混元专区

腾讯云TCE专区

腾讯云Lighthouse专区

腾讯云HAI专区

腾讯云Edgeone专区

腾讯云存储专区

腾讯云智能专区

腾讯轻联专区 

腾讯云开发专区

TAPD专区

腾讯轻量云游戏服专区

腾讯云最具价值专家

腾讯云架构师技术同盟

腾讯云创作之星

腾讯云开发者先锋

腾讯云代码助手

云原生构建

TAPD 敏捷项目管理

Cloud Studio

SDK中心

API中心

命令行工具

涵盖代码开发、场景应用、自动测试全流程，助你从零构建专属AI助手

一站式MCP教程库，解锁AI应用新玩法

我有一个读取csv文件的脚本，其中包含非常大的字段：# example from http://docs.python.org/3.3/library/csv.html?highlight=csv%20dictreader#examplesimport csvwith open('some.csv', newline=...

问_csv.Error:字段大于字段限制(131072)
EN

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问_csv.Error:字段大于字段限制(131072)EN

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问_csv.Error:字段大于字段限制(131072)
EN