首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

Python脚本之根据excel统计表字段缺失率实用案例

有时候,我们需要去连接数据库,然后统计下目标库表字段有多少个空,并且计算出它缺失率: 缺失率 = (该字段NULL+NA+空字符串 记录数)/该表总记录数 这时候如果表中有几个字段,并且总共统计就几个表还可以用手动方式...,但是如果每个表有几十个字段,几百上千个表需要去统计,那这种就应该考虑用程序去自动统计了,我们程序设计思路是: 1....将需要统计表名和字段以及类型放在excel里边; 2. 使用 pandas 读取excel数据; 3. 连接数据库; 4. 将读取到excel里边数据拼接如sql里边统计; 5....将计算结果写回到 excel 根据思路我们接下来编写程序代码了。...一、excel 格式 excel设置很重要,因为会影响到我们程序读取设计: 二、程序编写 2.1 导入相关模块,并使用 pandas 读取 excel 里边数据: import pymssql

2.6K20
您找到你想要的搜索结果了吗?
是的
没有找到

Excel,如何根据求出其在表坐标

在使用excel过程,我们知道,根据一个坐标我们很容易直接找到当前坐标的,但是如果知道一个坐标里,反过来求该点坐标的话,据我所知,excel没有提供现成函数供使用,所以需要自己用VBA编写函数使用...(代码来自互联网) 在Excel,ALT+F11打开VBA编辑环境,在左边“工程”处添加一个模块 把下列代码复制进去,然后关闭编辑器 Public Function iSeek(iRng As Range...c.Address(False, False): Exit For Next If iAdd = "" Then iSeek = "#无" Else iSeek = iAdd End Function 然后即可在excel...表格编辑器中使用函数iSeek了,从以上代码可以看出,iSeek函数带三个参数,其中第一个和第二个参数制定搜索范围,第三个参数指定搜索内容,例如 iSeek(A1:P200,20),即可在A1与...P200围成二维数据表搜索“20“了。

8.7K20

问与答98:如何根据单元格动态隐藏指定

excelperfect Q:我有一个工作表,在单元格B1输入有数值,我想根据这个数值动态隐藏2至行100。...具体地说,就是在工作表中放置一个命令按钮,如果单元格B1数值是10时,当我单击这个命令按钮时,会显示前10,即第2至第11;再次单击该按钮后,隐藏全部,即第2至第100;再单击该按钮,...则又会显示第2至第11,又单击该按钮,隐藏第2至第100……也就是说,通过单击该按钮,重复显示第2至第11与隐藏第2至第100操作。...注:这是在chandoo.org论坛上看到一个贴子,有点意思。...A:使用VBA代码如下: Public b As Boolean Sub HideUnhide() If b =False Then Rows("2:100").Hidden

6.2K10

Excel查找技巧,根据两个来查找相对应

标签:Excel公式,VLOOKUP函数,OFFSET函数,SUMIFS函数 在Excel,查找需求多种多样,关键是看你怎么样搭配各种函数来实现了。...如下图1所示,要根据代码和编号两个来查找对应数量。 图1 有三种解决方案来实现目的: 1.连接关键值。此时,可以使用辅助列,也可以使用数组公式。 2.SUMIFS函数。...此时,返回必须是数字。 3.OFFSET函数。此时,如示例代码列排好序才能实现。...,然后使用查找函数来查找相对应。...将上述两个返回作为OFFSET函数参数,返回要查找单元格区域,作为VLOOKUP函数参数,最后返回相对应。 当然,这样公式也需要数值排序如示例一样。

1.4K40

用过Excel,就会获取pandas数据框架和列

Excel,我们可以看到、列和单元格,可以使用“=”号或在公式引用这些。...每种方法都有其优点和缺点,因此应根据具体情况使用不同方法。 点符号 可以键入“df.国家”以获得“国家”列,这是一种快速而简单获取列方法。但是,如果列名包含空格,那么这种方法行不通。...要获取前三,可以执行以下操作: 图8 使用pandas获取单元格 要获取单个单元格,我们需要使用和列交集。...想想如何在Excel引用单元格,例如单元格“C10”或单元格区域“C10:E20”。以下两种方法都遵循这种和列思想。 方括号表示法 使用方括号表示法,语法如下:df[列名][索引]。...接着,.loc[[1,3]]返回该数据框架第1和第4。 .loc[]方法 正如前面所述,.loc语法是df.loc[,列],需要提醒(索引)和列可能是什么?

18.9K60

Excel根据固定利率计算投资未来(FV函数)

文章背景:在学习Excel财务金融函数时,由于相关知识匮乏,财务函数理解起来比较费劲。因此,本着less is more原则,对各个函数进行重新梳理。本文对FV函数进行介绍。...FV 是一个财务函数,用于根据固定利率计算投资未来。 语法:FV(rate,nper,pmt,[pv],[type]) rate:必需。各期利率。 nper:必需。年金付款总期数。...对于所有参数,支出款项,如银行存款,以负数表示;收入款项,如股息支票,以正数表示。 接下来介绍FV函数两个应用场景。 计算一系列付款未来。...比如:你每月存500美元用于退休养老金,预期平均年利率5%,期限为10年。到期后,你退休账户中将会有77,641.14美元。 基于上图,在C7公式,pv为缺省项,默认退休账户初值为0。...基于上图,在C7公式,pmt为缺省项,因为不涉及每月付款。type也为缺省项,默认为0,代表分红时间是在每月月末。如果type取1,未来计算结果不变。

1.7K20

Excel公式:提取第一个非空

标签:Excel公式,INDEX函数,MATCH函数 有时候,工作表数据可能并不在第1个单元格,而我们可能会要获得第一个非空单元格数据,如下图1所示。...图1 可以使用INDEX函数/MATCH函数组合来解决这个问题,如果找不到的话,再加上IFERROR函数来进行错误处理。...在单元格H4输入公式: =IFERROR(INDEX(C4:G4,0,MATCH("*",C4:G4,0)),"空") 然后向下拖拉复制公式至数据单元格末尾。...公式,使用通配符“*”来匹配第一个找到文本,第二个参数C4:G4指定查找单元格区域,第三个参数零(0)表示精确匹配。 最后,IFERROR函数在找不到单元格时,指定返回。...这里没有使用很复杂公式,也没有使用数组公式,只是使用了常用INDEX函数和MATCH函数组合来解决。公式很简单,只是要想到使用通配符(“*”)来匹配文本

3.5K40

Linux 删除文本重复

在进行文本处理时候,我们经常遇到要删除重复情况。那怎么解决呢? 下面就是三种常见方法? 第一,用sort+uniq,注意,单纯uniq是不行。...shell> sort -k2n file | uniq 这里我做了个简单测试,当file重复不再一起时候,uniq将服务删除所有的重复。...经过排序后,所有相同行都在相邻,因此unqi可以正常删除重复。 第二,用sort+awk命令,注意,单纯awk同样不行,原因同上。...P; D' 最后附一个必须先用sort排序文本例子,当然,这个需要用sort排序原因是很简单,就是后面算法设计时候“局部性”,相同可能分散出现在不同区域,一旦有新相同行出现,那么前面的已经出现记录就被覆盖了...参考推荐: 删除文本重复(sort+uniq/awk/sed)

8.5K20

Elasticsearch中将Doc根据A字段排序获得第一个DocB字段方法

注:本文基于Elasticsearch 6.1.2编写 最近遇到这样一个需求,要通过Elasticsearch将Doc根据A字段降序,然后获得B字段,最终根据B字段再去做Pipeline Aggregation...先尝试了Max Aggregation,但是Max Aggregation只能获得A字段最大。...下面举例说明 比如现在我们有一堆股票价格数据,我们现在需要获得股票每天收盘价比前一天差值(Delta)。...下面先倒入一段股票数据,date字段代表时间戳,price字段代表当时价格: POST /_bulk {"index":{"_index":"stock-price","_type":"data"}...,这个会用到Scripted Metric Aggregation 最后根据算每个bucket差值,这个会用到Serial Differencing Aggregation 下面是查询代码: GET

1K20

【PY】根据 Excel 指示修改 JSON 数据

前言 继上一次友友问了如何处理 Excel 数据之后,这次他又遇到了新问题,让我们一起来看看; 根据 Excel 指示,把旧 json 内容改成新 json 内容,那接下来且看博主娓娓道来...; 如果对处理 Excel 数据感兴趣小伙伴,可以看看之前文章:【PY】pandas 处理 Excel 错别字修正; 读入 Excel 因为要对 Excel 数据进行读取,首先想到就是...[0].values 按照友友说法,需要根据 role_id,将新 json 内容替换到旧 json 中去; 到这里,读入 Excel 就完工了,我们接下来根据 role_id 处理一下 JSON...,发现是 role_id 在12位置有问题,看一下输出结果,果真如此: 3、修改旧 JSON 文件内容; 根据上述,我们只需要将新覆盖到旧上就行了: old_content['对话过程'][...后记 以上就是 根据 Excel 指示修改 JSON 数据 全部内容了,讲解了如何通过 pandas 包来读入 Excel,以及如何处理 JSON 数据,结合实际场景,具体问题具体分析,图文并茂,

19830

Excel公式练习:根据条件获取唯一第n个

引言:本文练习整理自chandoo.org。多一些练习,想想自己会怎么解决这个问题,看看别人又是怎样解决,这样能够快速提高Excel公式编写水平。...本次练习是:编写一个公式,用于显示数据(Data)列与当前选定查找项目匹配项目(Item)列第n个最大唯一。 示例数据如下图1所示。...单元格D2、E2数据可以输入,公式根据其数据返回相应结果。根据不同输入数据,公式结果应该如下图2所示。 图2 规则: 1.公式不能使用整列引用。 2.不能使用中间公式。...4.无论数据放置在工作表任何地方,公式都能正常运行。 5.除了规定名称“i”“d”“n”“l”外,不能有其它硬编码引用。 请写下你公式。 解决方案 公式1:数组公式。...=LARGE((MATCH(l&d,i&d,)=ROW(i)-MIN(ROW(i)-1))*(i=l)*d,n) …… 上面列出大多数公式都没有进行详细解析,有兴趣朋友可以参照前面文章给出方法逐个研究

2.2K30

Excel小技巧90:快速删除包含指定所有

有一个Excel操作问题:我想删除所有包含有“完美Excel,如何快速操作? 我想,你肯定是多么地不想再看“完美Excel”公众号了!...如下图1所示工作表,现在要删除单元格内容为“完美Excel”所在。 ? 图1 首先,选择所有的数据。...接着,按Ctrl+F键,在“查找和替换”对话框“替换”选项卡,输入“完美Excel”,如下图2所示。 ?...图2 单击“查找全部”按钮,在下面的列表框中选中全部查到单元格(先选取第1,按住Shift键,滚动到最后,选取最后1,这将选择所有查找到结果),如下图3所示。 ?...图4 单击“确定”按钮,即可删除所有含有“完美Excel”内容单元格所在。 详细操作演示见下图5。 ? 图5

9.1K50

Excel公式练习:根据条件获取唯一第n个(续)

引言:本文练习整理自chandoo.org。多一些练习,想想自己会怎么解决这个问题,看看别人又是怎样解决,这样能够快速提高Excel公式编写水平。...本次练习是:在《Excel公式练习:根据条件获取唯一第n个,编写了一个公式用于显示数据(Data)列与当前选定查找项目匹配项目(Item)列第n个最大唯一。...然而,如果n是6,而我们只有3个唯一,那么编写公式应该返回0。 这里,你任务是修改这些公式,以便在上面所说情况下,返回最小非零唯一。 示例数据如下图1所示。...单元格D2、E2数据可以输入,公式根据其数据返回相应结果。根据不同输入数据,公式结果应该如下图2所示。 图2 规则: 1.公式不能使用整列引用。 2.不能使用中间公式。...4.无论数据放置在工作表任何地方,公式都能正常运行。 5.除了规定名称“i”“d”“n”“l”外,不能有其它硬编码引用。 请写下你公式。 解决方案 公式1:数组公式。

1.8K10

1Python代码,可以拆分Excel吗?根据不同sheet命名新文件。

今天python-office发布了一个新功能: “1代码,拆分你指定1个Excel文件为多个Excel文件,以sheet命名。...本文给大家详细介绍一下~ 1、需求说明 上文给大家讲了excel合并,是把多个excel合并为一个excel。...“这里大可放心,哪怕每个表格式、内容不同,也完全可以无损拆分。这里用班级成绩合并举例,只是为了大家更好理解。 2、1代码实现 下面我们用一代码,实现上面这个功能。...,简写为office import office #1代码,验证是否绑定成功 office.excel.sheet2excel(file_path='d://程序员晚枫文件夹/class.xlsx...') #参数作用: # file_path = 将要拆分Excel文件位置,只能拆分xlsx后缀Excel文件。

1.3K40
领券