Node.js:从CSV文件中删除特定列
Node.js:从CSV文件中删除特定列
提问于 2020-07-01 18:40:45
我有一个CSV文件可以包含大约百万条记录，如何删除以开头的列
_
并生成结果csv
为了简单起见，假设我有以下csv
Sr.No Col1 Col2 _Col3 Col4 _Col5
1 txt png 676766 win 8787
2 jpg pdf 565657 lin 8787
3 pdf jpg 786786 lin 9898我希望输出是
Sr.No Col1 Col2 Col4
1 txt png win
2 jpg pdf lin
3 pdf jpg lin我是否需要读取整个文件来实现这一点，或者是否有更好的方法来实现这一点。
const csv = require('csv-parser');
const fs = require('fs');
fs.createReadStream('data.csv')
.pipe(csv())
.on('data', (row) => {
// generate a new csv with removing specific column
})
.on('end', () => {
console.log('CSV file successfully processed');
});任何关于我如何实现这一点的帮助都将是有帮助的。
谢谢。
回答 3
Stack Overflow用户
回答已采纳
发布于 2020-07-02 18:58:43
写给那些偶然发现这篇文章的人
我可以使用下面的代码来转换csv
和
模块。
await fs.createReadStream(m.path)
.pipe(csv.parse({delimiter: '\t', columns: true}))
.pipe(csv.transform((input) => {
delete input['_Col3'];
console.log(input);
return input;
}))
.pipe(csv.stringify({header: true}))
.pipe(fs.createWriteStream(transformedPath))
.on('finish', () => {
console.log('finish....');
}).on('error', () => {
console.log('error.....');
});来源：
https://gist.github.com/donmccurdy/6cbcd8cee74301f92b4400b376efda1d
Stack Overflow用户
发布于 2020-07-01 18:59:50
实际上，您可以使用两个npm包来处理此问题。
https://www.npmjs.com/package/csvtojson
将库转换为JSON格式
然后使用这个
https://www.npmjs.com/package/json2csv
使用第二个库。如果您知道您想要的确切字段是什么。您可以传递参数来专门选择您想要的字段。
const { Parser } = require('json2csv');
const fields = ['field1', 'field2', 'field3'];
const opts = { fields };
try {
const parser = new Parser(opts);
const csv = parser.parse(myData);
console.log(csv);
} catch (err) {
console.error(err);
}或者，您可以手动修改JSON对象以删除这些列
Stack Overflow用户
发布于 2021-02-17 21:49:47
尝试使用csv lib执行此操作
const csv = require('csv');
const fs = require('fs');
const csvString=`col1,col2
value1,value2`
csv.parse(csvString, {columns: true})
.pipe(csv.transform(({col1,col2}) => ({col1}))) // remove col2
.pipe(csv.stringify({header:true}))
.pipe(fs.createWriteStream('./file.csv'))页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/62675000
复制相关文章
相似问题