Loading [MathJax]/jax/output/CommonHTML/config.js
前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
社区首页 >专栏 >批量汇总CSV文件数据,怎么只剩一列数据了?

批量汇总CSV文件数据,怎么只剩一列数据了?

作者头像
大海Power
发布于 2021-08-31 03:28:25
发布于 2021-08-31 03:28:25
1.8K0
举报

这是群里一个朋友的提问,算是一个大家可能会遇到的坑,可以了解一下。即:

在用Power Query批量汇总CSV文件数据时,自定义写公式解析文件,结果展开时,只有一列数据:

对于这个问题,一般情况下是不会出现的,Csv.Document函数会自动识别出该文件分成了多少列,并全部读出来。

所以,我专门要了他所需要汇总的部分文件来看,发现两个特点:

  1. 该CSV文件明显是从某些系统导出来的;
  2. 该CSV文件在具体数据前,有多行说明信息,每行信息都只有第一列有内容(这个可能不是关键影响因素,经自己构建CSV测试,这种情况不影响所有数据的读取)

而针对这个单独文件,通过从CSV文件导入的方式,是可以完全识别出所有数据的,但生产的步骤(源)里,是一个完整的参数信息,其中明确指出了列数:

根据这个情况,我们直接修改前面批量汇总时使用的公式,加入Columns参数,结果解析正常:

后续再按解析出来的内容进行整理合并即可,关于其中处理掉多余行、再合并等方法,可以参考以下系列免费视频:

【免费系列视频】Excel数据汇总特辑 | 多个案例,多种情况,举一反三!

或文章:

用PQ自动汇总各种文件数据,这一系列我又都给你整理好了!

上面的例子,主要体现大家可能会遇到的情况:

从某些系统导出来的CSV文件,可能在不给出解析函数的某些参数时,部分数据读取不全的情况(这种情况在自己模拟的CSV文件中没有出现),一旦出现类似情况,可以尝试从单文件角度先研究解决办法,然后再去解决批量合并的问题。

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2020-05-21,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 Excel到PowerBI 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
不用找VBA,多路径多文件夹数据的汇总,原来还是这么简单!
关于用Power Query汇总Excel数据文件,我前期用了多个案例录制了多个视频进行讲解,做成了一个免费的Excel数据汇总系列特辑:
大海Power
2021/08/31
8200
怎么只读取文件夹中最近一天的表格?PQ里这个筛选真方便!
但是,即使案例再多,也仅能作为参考,最关键的还是要自己把基础知识掌握并熟练运用,这样,再多的情况,都可以自己按需处理了——基础和思路是最重要的。
大海Power
2021/08/31
8220
1.3 PowerBI数据准备-获取文件夹,合并相同表头Excel或CSV
加入 PowerBI自己学 知识星球:下载源文件,边学边练;遇到问题,还可以提问交流。
PowerBI自己学_轻松
2025/02/20
1050
1.3 PowerBI数据准备-获取文件夹,合并相同表头Excel或CSV
2.5 数据丰富
PQ的主要功能有三个:数据汇总(横向、纵向、多文件)、数据清洗(12招)、数据丰富。我们这节来讲数据丰富,即数据深加工的过程。
公众号PowerBI大师
2019/08/06
8570
2.5 数据丰富
批量汇总文件数据,有多种文件类型怎么办?
大海:这个问题解决的思路很简单,Power Query里针对不同的格式有不同的解析函数。比如csv,可以用Csv.Document去解析,Excel则用Excel.Workbook去解析……
大海Power
2021/08/30
7940
多Excel文件数据汇总,列名大小写不一致咋办!!!
大海:多个Excel工作簿内容汇总用Power Query不是很简单的事情吗?前面我不仅推送了大量文章《用PQ自动汇总各种文件数据,这一系列我又都给你整理好了!》,另外,还专门发布了一个关于数据汇总的视频合集《【免费系列视频】Excel数据汇总特辑 | 多个案例,多种情况,举一反三!》
大海Power
2021/08/31
6990
分享一个批量汇总合并文件的程序
假设手上有4个格式类似的文档,每个文档里均包含销售、成本、人工这3张工作表。我们需要分别对这三张表进行合并,结果如下。
btharp
2022/12/01
8220
表头行的日期要转成一列,怎么搞?
小勤:我这堆表的表头上有个日期,是表示每张表的更新时间,我想将这个日期变成这个表的一列,然后再和其他表的数据汇总到一起,怎么弄?
大海Power
2023/09/09
2580
表头行的日期要转成一列,怎么搞?
matlab批量处理excel(CSV)文件数据
今天是2019-1-29,参加完2019年美国大学生数学建模竞赛,小伙伴都回家了,就我一个人在寝室,太无聊了,就把在比赛中遇到的excel批处理,写一下思路(ps:其实我在比赛中 利用的是SQLServer数据库和matlab相结合的数据处理方法,但是一般情况下遇到的都是matlab对excel数据批处理,所以降低要求写了matlab对excel数据批处理,此思路都是小编凭感觉自己摸索出来的,如有错误欢迎指出)。
全栈程序员站长
2022/09/14
1K0
matlab批量处理excel(CSV)文件数据
PQ-批量汇总多Excel表格:标题都从第n行起怎么办?
标准Excel表格批量汇总过程及基础方法请参考文章:《PQ批量汇总Excel文件就是这么简单》,所有特殊情况处理都是在该基础方法之上加以适当的处理而已。
大海Power
2021/08/30
8530
PQ/PP结合:领导就要这种格式的数据汇总之续篇
小勤:我知道了,其实跟传统数据透视表的布局设置都是一样的了,就是取消分类汇总、取消行列总计、设置表格形式、合并居中……你关于数据透视布局的文章《随心所欲的分类汇总》和《行列表头,想合就合,想套就套》里说得很清楚了哦。
大海Power
2021/08/30
1.1K0
批量汇总Excel数据,只要表中的某几列,怎么办?
小勤:我要汇总的一堆表里,每个表的情况不太一样,但有些列是每个表都有的,我就是要汇总这些列,怎么办啊?
大海Power
2021/08/30
5600
PQ批量汇总多Excel表格之特殊处理:标题不在第1行
小勤:我有一批从某个系统导出来的表,主体数据表格式完全一样,但标题行在第2行(第1行通常是空的),为什么通过Power Query合并时,有的会忽略掉第1行空行,有的又不会忽略掉?
大海Power
2021/08/30
1.6K0
批量汇总ERP系统数据有乱码!咋整?
小勤:大海,我这个从ERP导出来的数据用Power Query汇总,怎么是一堆乱码啊?
大海Power
2021/08/31
5630
Power Query整理图片识别出来的数据
我们在使用图片识别文字时常常会出现识别出来的文字是这样的,如果识别出来是这样的东西,它们的数据图片中是4列的,识别变成文字后是一列的:
哆哆Excel
2022/10/31
1.6K0
厉害了,word哥,用PQ将word简历表格数据批量汇总到Excel,这实在是666666
小勤:大海,公司汇总了所有应聘者的简历,但都是分散的word文件,一个人一份,有没有办法将其中的姓名、性别、手机和邮箱等信息汇总到Excel里啊?
大海Power
2021/08/30
1.3K0
批量汇总多Excel表格 | 格式化表单转数据明细之3:可配置的映射关系
【本文内容需要前期基础知识准备较为充分,但是,当你充分理解并完成了本文的内容,这将变成一个通用的可配置的格式化表单数据转换工具,以后只需要根据实际表单的格式情况,做好映射表的配置,即可实现相应表单数据的转换,一劳永逸。】
大海Power
2021/08/31
9830
批量汇总JSON文件数据?超级轻松!
目前JSON已成为当前互联网及各类业务系统的主要数据交换方式之一,且随着新一代软件平台“微服务”架构的流行,JSON格式数据将会更多地出现在不同的业务平台中。 另一个更加具体的应用是,在Power BI中自定义不同的颜色主题时,就是将系列颜色编码编制成一个JSON文件,然后导入到Power BI中——多了解一些关于JSON文件的知识,没准很快就在哪个地方碰到用上了。
大海Power
2021/08/31
7910
批量导入并整合pdf数据做分析,用Power BI小意思啦!
小勤:我们每天都能收到供应商推送的pdf格式的燃油价格文件,怎么能方便地整合到一起做数据分析啊?
大海Power
2021/08/30
2.6K0
PQ小问题小技巧8个,第一个就很多人都遇到了!
在Power Query及Power Pivot系列课程中,对大家日常学习和使用过程中的较多问题和可能遇到的坑有诸多讲解,比如,PQ系列课一开始就有新手经常遇到问题提示,让大家有一定的印象(也可能很多朋友直接跳过去了):
大海Power
2021/08/31
2.4K0
推荐阅读
相关推荐
不用找VBA,多路径多文件夹数据的汇总,原来还是这么简单!
更多 >
领券
社区富文本编辑器全新改版!诚邀体验~
全新交互,全新视觉,新增快捷键、悬浮工具栏、高亮块等功能并同时优化现有功能,全面提升创作效率和体验
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
查看详情【社区公告】 技术创作特训营有奖征文