使用显式位置值将名为 newColumnName 的列追加到 table 中。 一个初始索引值 initialValue(可选值)。 一个可选值 increment,指定每个索引值的增量。
所有要进行操作的文件下载链接: https://pan.baidu.com/s/10VtUZw8G-Ly-r4VypntjiA 密码: y5qu 下载成功后,整个文件夹如下图所示。
其实我们仔细看一下场景1和场景2,它们之间是个逆过程,场景1是从Python获取数据传递到Power BI,而场景2是Power BI或者Power Query获取了数据,用python来处理。
在power query中使用如下代码,可以批量导入格式相同的文件,把文件放到文件夹即可
这篇文章,教会大家使用菜单类工具搞定数据地图,包括数据的获取、经纬度解析、数据地图生成等三大技能。 利用Excel2016版的PowerQuery的数据爬取功能爬取网页表格; 利用XGeocoding_v2工具批评解析地址经纬度; 利用PowerBI、Tableau制作数据地图。 首先保证安装桌面版Excel2016,下载XGeocoding_v2地址解析工具,安装PowerBI、Tableau等工具,最后需要拥有一个百度地图的免费API(需自行申请)。 要爬取的网页是关于中国大学排行榜,网址:http:/
大海:嗯。的确是,PowerQuery最大的优势就是只需要干一次,以后有新数据就刷新一下就搞定,尤其适合这些需要频繁重复操作的工作。
小勤:现在的银行卡都是一长串的数字,能否用Power Query做成每4位加一个空格显示的方式?现在在Excel里可以写公式,但公式比较长,而且增加数据的时候也麻烦。
前些天,大神高飞对本人小黄书做了一次送书活动,得到大家的热烈支持,小黄书自上市以来,保持Excel Power系列新书榜第1,非常感谢大家的认可:
作为一款自助式BI的轻量ETL工具,PowerQuery的确可以让我们享受许多数据处理的便利,无需专业的能力,大部分仅需通过界面的操作即可完成,无可否认PowerQuery的使用体验是非常棒的。
UNION语句类似于PowerQuery中的追加查询,可以将两个表或者两个数据集进行上下合并。DAX函数中也有UNION,而且用法上有很大的相似。
我们在使用图片识别文字时常常会出现识别出来的文字是这样的,如果识别出来是这样的东西,它们的数据图片中是4列的,识别变成文字后是一列的:
日常工作中有时会遇到批量导入文件的场景,比如:excel,csv,json,手工合并是一种比较简单的方法,就是效率太低,PowerQuery最适合做这种事了,PowerQuery默认就有导入文件夹的选择,可以轻松实现批量导入。(格式要一致)
power query学习笔记, 记录下一些不可直接操作但使用频次相对较高的一些语法 大数据时代的来临,每天需要处理的数据量都很大,对于部分计算机语言学起来比较吃力的同学,可以选择PQ进行大体量数据的处理,基本上都是可视化操作,方便上手 而且从16版开始16、19、365版本的excel pq不在需要单独插件,直接并入到Excel的【数据】选项卡下面了,使用起来更方便
本文比较简单,只是某个客户在进行报表制作初期碰到的一个小问题,略作描述,以示避坑。
大海:在PowerQuery里可是没有if函数哦,不错有if…then…else…语句。跟Excel里的if函数的3个对应参数是一样。
PowerQuery是微软官方推出的数据处理ETL工具,在Excel2010和Excel2013版本上以插件的形式提供,在Excel2016上已经深度集成到Excel的原生功能中,具体位置在【数据】选项卡内。Excel2016甚至可以使用VBA调用PowerQuery功能模块,数据处理自动化水平得到很多地提升。
小勤:最近公司在统计各类产品的最低价客户情况,要求全部汇总到一个表里交给领导,大概要求是这样的:
本节为《Chapter 1:Why Python for Excel?》的第一部分,简单地讲解了Excel的历史,Excel编程的最佳实践,以及Excel为适应发展而作出的变化。 当你每天花费很多时间
在PowerBI中,如果我们针对某些数据清洗操作进行修改的话,只需要打开高级编辑器查看M语言,对特定的语句进行修改删除就可以了。
Excel催化剂一直留空没开发工作薄功能,并非因其太复杂或无需求。正是因为需求很大,而现有的插件都有提供。
首先,由于日期表和时间表不能叠加在一起(原因在前文说过了),所以肯定是两张表单独和事实表进行关联,而事实表中日期和时间是在同一列。
1.可视化对象导出CSV格式限制3万行数据,这对于数据量动辄上百万甚至上亿的表来说是不可接受的;
在文章中,很少讲PowerQuery,也就是PowerBI的查询编辑,因为在实际应用中,确实没有碰到特别复杂的情况,原因有三: 1.使用PowerBI应减少在导入数据环节的复杂数据转换处理,这会拖慢速度,而且影响非常明显,所以,应该使用已经整理好的数据作为PowerBI的数据源,在这种模式下,PowerBI使用PQ快速简单筛选下数据就可以进行建模工作,而建模将处理海量数据的运算。 1.使用PowerBI的PowerQuery做非常复杂的数据转换工作,要求数据量应该是小的,例如:小于10W行。 1.即使是使用PowerBI的PowerQuery做非常复杂的数据转换工作,也有几个不写代码的重要套路。
同第一个阶段一样,特别附加一个小章节的目的是想把没有完善的且重要的知识补全。本节有三个知识点,日历表排序,在PowerQuery中创建日历表,定制日历表的使用。
我们讲过,利用循环的方式将PQ中得到的table表逐行导入SQL Server中,有的朋友怀疑这种方式会不会造成数据量较大时运行慢、能耗大的问题,这种顾虑理论上是恰当的,所以今天再介绍一种能够直接一次性导入SQL的办法。
VLookup无疑是Excel中进行数据匹配查询用得最广泛的函数,但是,随着企业数据量的不断增加,分析需求越来越复杂,越来越多的朋友明显感觉到VLookup函数在进行批量性的数据匹配过程中出现的卡顿问题也越来越严重。
很多人说国内的学习资料太少,在学习的过程中坎坷不断,我与大多数PowerBI学习者一样,一边读外文的博客摸索一边铺路,在不断尝试和与人分享的过程中,总结了个人认为最宝贵的十条DAX学习经验,分享给读者。
大海:好的,在PowerQuery里,文本类函数可能用得比数值计算函数还要多。这里我们通过和Excel里的常用文本处理函数进行对比的方式来学,可能会效果更好。
多工作薄合并的场景一直都在,市场上也有很多通用型插件有此功能,现在的powerbi中powerquery插件也对这方面的数据合并有很多简便的方式操作。
在Excel催化剂的持续性功能和文章输出的过程中,相信不少读者会觉得功能又多又杂,没有很好的系统性。
小勤:大海,公司有个数据本来应该2列的,他们分成好多个2列并排着录了,后面数据统计可麻烦了,怎么转成规范的数据啊?
小勤:在PowerQuery里,想统计一行中有多少个某个值,该怎么统计啊?比如说,我想计算一下某个商品一个月有多少天没有库存:
源 = Excel.CurrentWorkbook(){[Name="表1"]}[Content],
下午,我正爽歪歪地喝着咖啡,看着Power BI每秒钟刷新一次,静静等待某个分公司完成本月绩效任务,自动调用Python在钉钉群中发送喜报:
近期,学习了马老师的商业智能财务分析(PowerBI)课程后,不免手痒,教学中的案例数据不过瘾,于是在PowerBI学友的启发下,自己找现实数据玩了起来。那么今天的文章主要内容是怎样从PBI批量爬取在线的财务报表数据。直接进入正题。
小勤:大海,上次看你用Powerquery爬取国际燃油价格的内容,觉得太好玩儿了。但国际燃油价格那个可能很多人都不关注,能不能来点更普适性的,比如股票?
许多业务专业强的人,通常开口就说工具不是最重要,业务思维才是最重要,才能产生最大的价值。
小勤:大海,有个按最右侧某个符号为标志提取两边数据的问题,为什么Excel里的find函数不支持从右侧查起啊?写公式好麻烦,比如这个,按最右侧的星号(*)将前面的内容和后面的数量分开:
大海:好吧。我先教你爬一页的数据,以后再教你怎么爬所有页面的。你看,证券之星里的沪深A股数据在http://quote.stockstar.com/stock/ranklist_a_3_1_2.html网页里。
大海:哈哈,的确挺奇葩的,这种数据录入的方法不仅容易出错,而且会害屎后面做统计分析的人——当然,也会让做统计分析的人更强大。
前些日子,有一位读者留言一个问题,我写了个公式过去,来回几次都没有解决,最后发现她竟然把DAX公式写在了编辑查询器里,我是五十步笑百步,因为本人也犯过同样的错误!我想告诉她没关系,自学成材这件事注定要有试错的弯路,而这些弯路都会让你更深刻地认识一个知识点。
小勤:一个订单里有多个货物的时候,还得先确定货物的体积重量比,然后整个订单的体积重量比都要以体积重量比最大的那个货物为准。
本文将讲解如何从零开始使用PowerBI Desktop制作一份动态销售报告。帮助大家快速入门PowerBI Desktop的操作。我们先来看一下一份动态销售报告的构成。 1、左上角放置了小黎子数据分析的二维码图片,紧接着是切片器,由城市,店长,店铺数据默认情况下是所有的数据,点击下拉框可以进行筛选数据 2、右上角是放置的卡片图,主要用于显示报告分析中重要的指标。 3、中间部分的图表显示的业绩排名,业绩贡献,业绩增长情况 4、左下角的散点图,使用了十字线将所有员工分为四个象限,右上角就是指标最佳的员工,左下角就是指标比较差的人员。圆圈大小代表着业绩金额大小。 5、右下角用表展现店铺的销售数据情况。
小勤:大海,你上次说PowerQuery可以批量导入Excel文件,我参考你那个批量导入文本文件的方法试了一下,不行啊。
小勤:大海,公司有个关于网点的客户数量统计问题,涉及到非重复计数的问题,这么常用的功能,Excel里居然不支持!
= Table.Pivot(重排序的列, List.Distinct(重排序的列[类别]), "类别", "姓名",each Text.Combine(_,","))
关于优化Power BI中的Power Query合并查询效率,之前写过三篇文章:
小勤:大海,在PowerQuery里面能不能对一列数求和、算个数、求最大、最小值之类的啊?
小勤:我也不知道。那现在怎么办?总不能要在Excel里改成咱们的日常格式才能导进去吧?
领取专属 10元无门槛券
手把手带您无忧上云