Pandas是一个用于数据操作和分析的Python库。它建立在 numpy 库之上，提供数据帧的有效实现。数据帧是一种二维数据结构。在数据帧中，数据以表格形式在行和列中对齐。...它类似于电子表格或SQL表或R中的data.frame。最常用的熊猫对象是数据帧。大多数情况下，数据是从其他数据源（如csv，excel，SQL等）导入到pandas数据帧中的。...在本教程中，我们将学习如何创建一个空数据帧，以及如何在 Pandas 中向其追加行和列。...ignore_index参数设置为 True 以在追加行后重置数据帧的索引。 然后，我们将 2 列 [“薪水”、“城市”] 附加到数据帧。“薪水”列值作为系列传递。序列的索引设置为数据帧的索引。... Pandas 库创建一个空数据帧以及如何向其追加行和列。
MAC帧在传输的时候使用的源地址和目的地址都是硬件地址，这两个硬件地址都写在MAC帧的首部中了。...连接在通信链路上的设备在收到MAC帧时，根据MAC帧首部中的硬件地址决定收下或丢弃，只有在剥去MAC帧的首部和尾部后把MAC层的数据上交给网络层后，网络层才能在IP数据报的首部中找到源IP地址和目的IP...网络层使用的是IP地址，但是在实际网络的链路上传送数据帧时，最终还是必须使用该网络的硬件地址。但是IP由于和下面的网络的硬件地址之间由于格式不同而不存在简单的映射关系。...当主机A收到主机B的ARP响应分组后，就在其ARP高速缓存中写入主机B的IP和硬件地址的映射。...注意：ARP是解决同一个局域网下的主机或路由器的IP地址和硬件地址的映射问题 那如果两个主机是在不同的局域网上呢？
2、地址块 CIDR把网络前缀都相同的所有连续IP地址组成一个“CIDR地址块”。常使用地址块中的最小地址（主机号全0）加“/”和网络前缀的位数来指明。...应用层数据 + 首部——>TCP报文 TCP报文 + 首部（含IP地址）——>IP数据报 IP数据报 + 首部（MAC地址） + 尾部——>MAC帧 协议栈中数据单元封装的特点...那就接着在ARP高速缓存中找到B的IP地址对应的MAC地址，然后将MAC地址写入要发送的MAC帧，然后把该MAC帧发送给B的MAC地址。 2、没有B的IP地址。...ARP高速缓存中写入主机B的IP地址到MAC地址的映射。...还是按同样的方法，将要发送分组的目的地址依次和转发表中网络的子网掩码按位AND运算，结果与该网络前缀匹配，则路由器按转发表发送 最长前缀匹配 在采用CIDR编址时，如果一个分组在转发表中可以找到多个匹配的前缀
于是两级IP地址在本单位内部就变为三级IP地址：网络号、子网号和主机号。 (3) 凡是从其他网络发送给本单位某个主机的IP数据报，仍然是根据IP数据报的目的网络号找到连接在本单位网络上的路由器。...但此路由器在收到IP数据报后，再按目的网络号和子网号找到目的子网，把IP数据报交付目的主机。 子网掩码 假定有一个数据报已经到达了路由器R1，这个路由器如何把它转发到子网呢？...若匹配，则把分组进行直接交付（当然还需要把 D 转换成物理地址，把数据报封装成帧发送出去），转发任务结束。 否则就是间接交付，执行(3)。...子网之后 —— 无分类编址CIDR（构成超网） CIDR最主要的特点有两个： (1) CIDR消除了传统的A类、B类和C类地址以及划分子网的概念 CIDR把32位的IP地址划分为两个部分。...CIDR 匹配与查找 最长前缀匹配 在使用CIDR时，由于采用了网络前缀这种记法，IP地址由网络前缀和主机号这两个部分组成，因此在路由表中的项目也要有相应的改变。
前言 上一篇记录了一下当主机配置了动态获取IP之后，连入网络之后究竟是如何获取IP得，以及如何根据CIDR（无类型域间选路）信息获取子网号、网络中第一个地址和子网掩码。...比如可以根据IP查找到主机在哪一栋楼，用MAC可以在用IP找到的楼中查找到对应的主机。 MAC地址有一定的定位功能，不过范围非常有限，只能局限在一个子网里面。 「数据报是发给谁，谁接收？」...从逻辑Internet地址到对应的物理硬件地址，在32 bit的IP地址和采用不同网络技术的硬件地址之间提供动态映射 「也就是说，通过ARP可以根据IP地址找到对应的MAC地址」 在需要发送一个数据报的时候...任何传给该主机IP地址的数据均送到127.0.0.1。 最大传输单元 MTU 以太网和802.3对数据帧的长度都有一个限制，其最大值分别是1500和1492字节。...通过ifconfig命令可查看每个网卡的MTU 路径 MTU 两台通信主机路径中的最小 MTU，路径MTU 在两个方向上不一定是一致的。
在IP层下面的每一种数据链路层协议都规定了一个数据帧中的数据字段最大长度，这称为最大传送单元MTU。...地址块中很多地址，在路由表中利用CIDR地址块来查找目的网络；路由聚合也称为构造超网 8）CIDR记法有很多种形式：10.0.0.0/10可简写为：10/10；在网络前缀的后面加一个星号*：00001010...它通过使用确认和超时这两个机制，在不可靠服务的基础上实现可靠的信息传输。如果发送方在发送后一段时间之内没有收到确认帧，它通常会重新发送。...它的基本工作原理如下图所示： 2）DNS的工作过程 **在浏览器中输入www.qq.com域名，操作系统会先检查自己本地的hosts文件是否有这个网址映射关系，如果有，就先调用这个IP地址映射，完成域名解析...**如果hosts里没有这个域名的映射，则查找本地DNS解析器缓存，是否有这个网址映射关系，如果有，直接返回，完成域名解析。
另见 Pandas Index的官方文档 生成笛卡尔积 每当两个序列或数据帧与另一个序列或数据帧一起操作时，每个对象的索引（行索引和列索引）都首先对齐，然后再开始任何操作。...类似地，AB，H和R列是两个数据帧中唯一出现的列。 即使我们在指定fill_value参数的情况下使用add方法，我们仍然缺少值。 这是因为在我们的输入数据中从来没有行和列的某些组合。...准备 在本秘籍中，我们通过回答以下查询来展示数据帧的groupby方法的灵活性： 查找每个工作日每个航空公司的已取消航班的数量 查找每个航空公司在工作日内已取消和改航航班的数量和百分比 对于每个始发地和目的地...除了查找算术和加权均值之外，我们还查找两个 SAT 列的几何和谐波均值，然后将结果作为数据帧返回，其中数据行是均值类型的名称，列是 SAT 类型。...在步骤 2 中重置索引后，pandas 将我们的数据帧的列默认设置为level_0，level_1和0。 这是因为调用此方法的序列具有两个未正式命名的索引级别。
书和过程的联系 下面提供了该过程中各个步骤的快速映射，您可以在本书中学习这些步骤。 如果该过程前面的步骤在后面的章节中，请不要担心。...以下显示Missoula列中大于82度的值： 然后可以将表达式的结果应用于数据帧（和序列）的[]运算符，这仅导致返回求值为True的表达式的行： 该技术在 pandas 术语中称为布尔选择，它将构成基于特定列中的值选择行的基础...这种自动对齐方式使数据帧比电子表格或数据库更有能力进行探索性数据分析。 结合在行和列上同时切片数据的功能，这种与数据帧中的数据进行交互和浏览的功能对于查找所需信息非常有效。...创建数据帧期间的行对齐 选择数据帧的特定列和行 将切片应用于数据帧 通过位置和标签选择数据帧的行和列 标量值查找 应用于数据帧的布尔选择 配置 Pandas 我们使用以下导入和配置语句开始本章中的示例...结果数据帧将由两个列的并集组成，缺少的列数据填充有NaN。 以下内容通过使用与df1相同的索引创建第三个数据帧，但只有一个列的名称不在df1中来说明这一点。
最后两个秘籍包含在数据分析期间经常发生的简单任务。 剖析数据帧的结构 在深入研究 Pandas 之前，值得了解数据帧的组件。...在视觉上，Pandas 数据帧的输出显示（在 Jupyter 笔记本中）似乎只不过是由行和列组成的普通数据表。 隐藏在表面下方的是三个组成部分-您必须具备的索引，列和数据（也称为值）。...在 Pandas 中，这几乎总是一个数据帧，序列或标量值。 准备 在此秘籍中，我们计算移动数据集每一列中的所有缺失值。...对于所有数据帧，列值始终是一种数据类型。 关系数据库也是如此。 总体而言，数据帧可能由具有不同数据类型的列组成。 在内部，Pandas 将相同数据类型的列一起存储在块中。...在深入研究之前，一些基本的健全性检查（例如确保行和列的数目相同或行和列的名称相同）是很好的检查。 步骤 6 将两个序列的数据类型一起比较。 在这里，我们揭示了数据帧不等效的原因。
IP地址和子网掩码，进行按位与后确定目标网络，然后查找路由表，假如路由表中有多条线路与之匹配，则选择网络位最长的（IP地址的最长匹配前缀），例如地址为196.168.24.1遇到表中有能够匹配的两个地址...ARP请求帧和返回帧，是非常耗费资源的，所以，有诸多的优化措施： 每个主机建立一个ARP表，缓存ARP的结果 用ARP请求中的源信息来更新ARP表（在ARP请求帧中包含源机的IP和MAC地址对，所以每一个收到请求帧的主机...，即使不做应答，也会根据请求帧的结果更新ARP表） 每个机器在启动时都会广播它的IP/MAC地址对，当前在局域网内的全部主机在收到后将它们储存在ARP缓存表中，这就是所谓的免费ARP，此时请求机不奢求能够收到应答...请求帧是二层广播帧，目标机只有跟源机在同一个LAN中才能收到请求帧，假如目标机是一个远程机（不在同一个局域网内部），则ARP无法找到目标MAC地址。...此时源机会先寻找整个网络中的默认网关，然后由默认网关找到目标机的MAC地址并最终返回源机 为了减少ARP请求次数，每个设备包括路由器都有各自的ARP表，ARP表是IP地址到MAC地址的映射表，存储在存储器内存中
在本节中，我们将研究其中的许多内容，包括： 在数据帧或序列上执行算术 获取值的计数 确定唯一值（及其计数） 查找最大值和最小值 找到 n 个最小和 n 个最大的值 计算累计值 在数据帧或序列上执行算术...两个DataFrame对象之间的算术运算将同时按列标签和索引标签对齐。 以下代码提取了df的一小部分，并将其从完整的数据帧中减去。...具体而言，在本章中，我们将介绍： 将 CSV 文件读入数据帧 读取 CSV 文件时指定索引列 数据类型推断和规范 指定列名 指定要加载的特定列 将数据保存到 CSV 文件 使用一般的字段分隔数据 处理字段分隔数据中格式的变体...Pandas 已经意识到，文件的第一行包含列名和从数据中批量读取到数据帧的名称。 读取 CSV 文件时指定索引列 在前面的示例中，索引是数字的，从0开始，而不是按日期。...我们从学习如何从 CSV，HTML，JSON，HDF5 和 Excel 格式的本地文件中读取和写入数据开始，直接读取和写入数据帧对象，而不必担心将包含的数据映射到这些各种数据中的细节。 格式。
下图中，交换机有 4 个接口，主机 A 向主机 B 发送数据帧时，交换机把主机 A 到接口 1 的映射写入交换表中。...为了发送数据帧到 B，先查交换表，此时没有主机 B 的表项，那么主机 A 就发送广播帧，主机 C 和主机 D 会丢弃该帧，主机 B 回应该帧向主机 A 发送数据包时，交换机查找交换表得到主机 A 映射的接口为...一个 CIDR 地址块中有很多地址，一个 CIDR 表示的网络就可以表示原来的很多个网络，并且在路由表中只需要一个路由就可以代替原来的多个路由，减少了路由表项的数量。...在路由表中的项目由“网络前缀”和“下一跳地址”组成，在查找时可能会得到不止一个匹配结果，应当采用最长前缀匹配来确定应该匹配哪一个。...该报文段则被放入在一个具有广播 IP 目的地址(255.255.255.255) 和源 IP 地址（0.0.0.0）的 IP 数据报中。
这两个主题都超出了本文的范围，但如果考虑将PySpark作为更大数据集的panda和scikit-learn的替代方案，那么应该考虑到这两个主题。...3.complex type 如果只是在Spark数据帧中使用简单的数据类型，一切都工作得很好，甚至如果激活了Arrow，一切都会非常快，但如何涉及复杂的数据类型，如MAP，ARRAY和STRUCT。...这意味着在UDF中将这些列转换为JSON，返回Pandas数据帧，并最终将Spark数据帧中的相应列从JSON转换为复杂类型 [2enpwvagkq.png] 5.实现 将实现分为三种不同的功能: 1)...，但针对的是Pandas数据帧。...但首先，使用 complex_dtypes_to_json 来获取转换后的 Spark 数据帧 df_json 和转换后的列 ct_cols。
网络层概述 网络层的目的是实现两个端系统之间的数据透明传送，具体功能包括寻址和路由选择、连接的建立、保持和终止等。它提供的服务使传输层不需要了解网络中的数据传输和交换技术。...这个映射关系是存储在ARP缓存表中的。...如果两个IP地址在子网掩码的按位与的计算下所得结果相同，即表明它们共属于同一子网中。 ...无分类编址CIDR CIDR中没有A、B、C类网络号、和子网划分的概念，CIDR将网络前缀相同的IP地址称为一个“CIDR地址块”，注意网络前缀是任意位数的。...地址转成外网的IP地址来进行外部的通信，并且在接收到数据之后，再把外网IP地址映射成内网IP地址，转发到具体的某个设备上面去。
所以，在路由器内部，需要有一个转发表。 在转发分组时，读取从IP数据报中首部的转发标识并在转发表中查询，其查询结果指出了该分组将被转发的路由器的链路接口。...ARP和RARP在IP协议的下方，因为IP协议要使用这两个协议，ICMP和IGMP在IP协议上方，因为这两个要使用IP协议。 5....### 特殊的IP地址 ? 5.物理地址 物理地址是数据链路层和物理层使用的地址，IP地址是网络层以及上层使用的地址 IP地址放到IP数据报的首部，物理地址放到数据链路层中MAC帧的首部。...6.ARP地址解析协议 目的：解决从IP地址到物理地址的动态映射问题 方法：每一个主机都动态维护一个ARP高速缓存（ARP Cache）,这个缓存中存放本局域网上各个主机的IP地址和物理地址的映射关系。...下次再向主机B发送信息时，直接从ARP缓存表里查找就可。 生存时间 ARP高速缓存中的每一个映射地址都有一个生存时间，当时间结束之后，就重新发送该广播更新地址。保证数据的正确性。 7.
网桥实现 ARP 协议以发现与给定 IP 地址关联的链路层 MAC 地址。当网桥接收到数据帧时，网桥将帧广播到所有连接的设备（原始发送者除外），响应该帧的设备存储在查找表中。...一旦流向 CIDR 块的流量到达节点，节点就有责任将流量转发到正确的 Pod。图 7 说明了两个节点之间的流量流，假设网络可以将 CIDR 块中的流量路由到正确的节点。...Nat网络地址转换 NAT 或网络地址转换是将一个地址空间重新映射到另一个地址空间的 IP 级别。映射通过在数据包通过流量路由设备传输时修改数据包的 IP 标头中的网络地址信息来实现。...桥接连接两个独立的网络，就好像它们是一个网络一样。桥接使用内部数据结构来记录每个数据包发送到的位置，以作为性能优化。 CIDR CIDR 是一种分配 IP 地址和执行 IP 路由的方法。...IP 地址是 CIDR 块的一部分，如果地址的初始 n 位和 CIDR 前缀相同，则称其属于 CIDR 块。
如果传递了索引，索引中与标签对应的数据中的值将被拉出。 ? 4、序列数据的访问 通过各种方式访问Series数据，系列中的数据可以使用类似于访问numpy中的ndarray中的数据来访问。 ?...6、DataFrame(数据帧) DataFrame是带有标签的二维数据结构，列的类型可能不同。你可以把它想象成一个电子表格或SQL表，或者 Series 对象的字典。...9、列选择 在刚学Pandas时，行选择和列选择非常容易混淆，在这里进行一下整理常用的列选择。 ? 10、行选择 整理多种行选择的方法，总有一种适合你的。 ? ? ?...18、查找替换 pandas提供简单的查找替换功能，如果要复杂的查找替换，可以使用map(), apply()和applymap() ?...19、数据合并 两个DataFrame的合并，pandas会自动按照索引对齐，可以指定两个DataFrame的对齐方式，如内连接外连接等，也可以指定对齐的索引列。 ?
---------交给默认路由0.0.0.0 无分类编址CIDR------因为B类很快就被瓜分完------路由表中的表项急剧增加------CIDR更进一步把子网号给取消--------直接换成网络前缀...-物理层就变成比特流来在链路上传输 如果发送到别的局域网的主机----------不在同一网段------下一跳就到默认网关-----寄希望于默认网关-------把默认网关的MAC这个放到数据帧---...------在实际网络链路传送数据帧，最终必须使用MAC地址--------解决下一条走哪里的问题---------ARP缓存10-20min更新一次 ---- I could be bounded...地址—链路层封装加上mac地址(根据ARP高速缓存----IP和MAC的缓存)------如果没有缓存就是ARP发一个广播请求分组找目的MAC地址------被找的人返回自己的MAC地址-----物理层就变成比特流来在链路上传输...-------发到别的路由器的时候-------解封装到网络层------因为就是个三层设备-------改一下源目MAC地址（ARP）-----再封装回去发出去 ARP------在实际网络链路传送数据帧
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
