腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

Coding迪斯尼

专栏作者

321

文章

267094

阅读量

97

订阅数

自己动手写数据库系统:容灾恢复原理和容灾恢复日志的设计

http node.js 缓存 java 编程算法

数据库系统有一个极其重要的功能，那就是要保持数据一致性。在用户往数据库写入数据后，如果数据库返回写入成功，那么数据就必须永久性的保存在磁盘上。此外作为一个系统，它必须具备自恢复功能，也就是如果系统出现意外奔溃，无论是内部错误，还是外部原因，例如突然断电等，系统都必须要保持数据的一致性。

2022-06-21

9190

尝试再造python编译器:龙书重制版

java 编程算法单片机 ide 打包

一段时间前，我们用go编写了python的词法解析器。由于近一段时间事情繁多，同时囊中羞涩，因此更多的精力投入到了和“变现”相关的工作，对编译原理，数据库这些极为基础且底层的技术有所忽略，毕竟他们不像reactjs, javascript，后台开发等这些工程性技术那样容易挣钱，因此属于用爱发电的范畴。但是工程性工作做多了我也发现一个问题，那就像人吃多精细食品而没有适当摄入粗粮，这会使得人有气无力，气虚多汗，让人感觉到体内虚空，没有底层理论和技术支持，一切上层构建都搭承在脆弱的地基上，随时有坍塌的危险。

2022-03-28

5120

试用GO开发python编译器：实现词法解析

编程算法 go python java

编译器由于涉及到编译原理，了解计算机科学的同学就能感触到，编译原理是较为抽象，无论从原理还是从实践上都是比较难把握的对象。在接触理论性较强，难度较大的问题时，最好的办法是从最简单的情况入手，先从感性上获得认知，为后面的理性认知打下基础，因此我们先从编译原理算法的基础入手，首先掌握词法解析。

2021-12-31

5030

试用GO开发pyhton编译器:字节码基础

java python ide 编程算法

掌握一门编程语言最好的办法或许是将它的编译器设计出来。毫无疑问那些开发Python编译器的人应该是世界上对Python了解最深刻的人群之一。我用python开发过不少程序，但是每次反思或复盘的时候总是感觉对Python的认知还不到位，由此也看了很多讲Python的书，但看的时候感觉好像懂了，但过了一段时间后又忘了，也就是说单纯看书很难将某一项技术完全内化。当然技能的掌握必然要从实践中来，但是我发现在使用Python开发程序时，我总是使用它的一部分功能就够了，或者说居于我的思维模式限制，我在使用python开发时总是落入一个套路，这使得我只能掌握python技术的冰山一角，就如同井底之蛙一样只了解一小块内容，为了能够打破认知局限，让我自己能更全面的对python的设计原理有更深入的了解，我打算尝试做一个能运行的python编译器。

2021-12-20

3240

java高级特性:使用反射实现万能序列化1

文件存储 java 编程算法 c++

很多时候我们需要将一个类的实例变成二进制数据存储或是通过网络发送，这个过程叫序列化。如果将二进制数据解析成位于内存中的类实例或是相关数据结构，那叫反序列化。所有的序列化算法都遵循一定的套路，例如:

2021-12-02

2640

高级java思考笔记:反射的基本原理1

java 文件存储 c++spring spring boot

原来我一直将java当做不用delete的c++来用，但是最近在工作上遇到一些问题，发现这样的做法不管用，因为工作上遇到的java代码采用了很多框架，例如spring boot之类。当我想深入了解这些框架的设计原理时发现，如果不了解java的高级语法特性，这些框架的设计思维或运行方式根本就无法理解。

2021-11-04

2310

java高并发架构设计原理:java的内存模型,volatile和线程数据安全

缓存压力测试 java 编程算法面向对象编程

最近工作上需要使用java完成高并发的服务器后台设计，因此对此作了一些研究，于是想把研究的心得，总结，经验写出来与大家分享，顺便巩固自己的认知。java通常用来开发大型网站，特别是用来开发应对高并发的后台服务器，例如淘宝就是依赖java后台来满足每天面临的海量数据请求。

2021-04-21

3130

人脸识别系统的原理与设计：Protocol Buffer，Tensorflow专有神经网络训练的数据结构

json 编程算法数据结构 java ide

前几节我们花费大量精力准备了用于后续网络训练的数据，但这些数据依然以图片附带一个说明文本的方式存储，在网络训练时需要有效的将它们加载到内存，到时候IO将是网络训练效率的一大瓶颈，事实上在涉及到深度学习的具体项目中，数据IO本身就是一个问题。

2021-03-15

5070

GOT段在linux系统中实现代码动态加载的作用和其他段的说明

go 网站 ide java

上一节我们看到，当程序想调用系统函数时，在编译阶段无法确认被调用函数所在的虚拟地址。因此必须有机制让程序在运行过程中，在调用系统API的时候有办法去确定所调用的系统函数对应的入口地址，这就是代码运行时对应动态加载的过程。

2020-12-01

2.2K0

如何简便快捷使用python抓爬网页动态加载的数据

html java 编程算法 ajax

最近朋友需要让我帮忙设计能抓取网页特定数据的爬虫，我原以为这种程序实现很简单，只要通过相应的url获得html页面代码，然后解析html获得所需数据即可。但在实践时发现我原来想的太简单，页面上有很多数据根本就无法单纯从html源码中抓取，因为页面展现的很多数据其实是js代码运行时通过ajax的从远程服务器获取后才动态加载页面中，因此无法简单的通过读取html源码获得所需数据。

2019-12-05

2K0

从0到1用java再造tcpip协议栈：架构重建，完整实现ping应用

在原先代码设计中，我们为了方便，喜欢在一个模块中组织数据包的协议头，然后将要发送的数据融合在一起，并调用网卡将数据发送出去，这种偷懒的做法将多种逻辑融合在一起。这种做法一旦遇到复杂的数据发送需求时，系统逻辑的复杂性会呈现出爆炸性的增长，最后超出我们的控制范围。

2019-03-04

5760

从0到1用java再造tcpip协议栈:ICMP协议的原理和实现

绝大多数TCPIP传输协议基于IP寻址协议，然后建造在IP之上的TCP和UDP两种协议用于控制数据包的传输。问题在于这些协议只关注数据传输，在传输过程中如果出现错误信息，或者是网络出现某种异常情况需要数据发送双方做一些控制操作时，我们就需要在这些协议的控制范围之外传递一些有关数据发送的控制信息，这些数据的发送就必须依赖于控制数据报协议，也就是ICMP协议。

2019-01-03

1.4K0

从0到1用java再造tcpip协议栈:实现ARP协议层

其他 java .net 存储

经过前两节的准备，我们完成了数据链路层，已经具备了数据包接收和发送的基础设施，本机我们在此基础上实现上层协议，我们首先从实现ARP协议开始。先简单认识一下ARP协议，ARP是一种寻址协议，它要找寻目标的物理地址，连接在互联网上的设备有两种地址，一种叫IP，也就是我们常见的192.168.2.1这类地址，另一种叫物理地址，例如我们电脑上的mac地址。

2018-12-20

1.5K0

从0到1用java再造tcpip协议栈:使用jpacap模拟数据链路层

java tcp/ip 数据结构 udp

我们上一节成功使用jpcap获得了网卡硬件，我们要重新构造tcp/ip协议栈，那么就需要做两部分工作。一部分由上层协议完成，他们的工作是将要发送的数据进行封装，主要是在数据包上添加包头数据结构，包头里有很多控制字节，用于不同节点间进行数据传送时对传送过程的控制和调整，了解，掌握，实现每层数据协议的包头结构以及数据控制流程是我们系列课程的重点和难点。

2018-12-20

1.3K0

使用java自造TCP/IP协议栈：使用JPCAP实现数据发包

java tcp/ip 数据处理 jar eclipse

从本节开始，我们打算使用java把tcp/ip网络协议栈重新实现一遍。这是一个不小的野心，自然也是一个不小的工程，好在前面顺利完成了操作系统，编译器两门课程的实现，这给了我极大的信心。整个互联网系统分为三大支柱，分别是操作系统，编译器，和网络协议，我们完成了前面三者，还剩第三者一直孤悬在那，直到今天我终于下定决心，尝试着把tcp/ip协议栈也重新实现一遍。

2018-12-20

2.2K0

Reactjs+BootStrap开发自制编程语言Monkey的编译器:发刊词

c 语言 java 打包编程算法 javascript

编译原理几乎是计算机专业中最晦涩难懂的课程。很多学生学这门课只不过是为了通过考试，学完后对编译原理之精妙仍然是摸不着头脑。而很多教这门课的老师，也只不过是混口饭吃，他自己未必对编译原理有多少深入的了解和把握，于是与其昏昏，使人昭昭。毕业多年后，回过头来反省我所承受的教育，我发现我们的教育总是流于表面的肤浅，给学生展示的始终是冰山的一角，对冰山下的巨大形体置若罔闻，于是整个系统虽然培养出大量的计算机专业人员，但有能力对计算机知识具备深入见解的人凤毛麟角，很多人其实是走上工作岗位后，通过大量的生产实践才开始对计

2018-07-19

6310

java开发操作系统：同时运行多窗口多任务

java 存储人工智能

在系统有了命令行窗口后，我们可以直接在窗口内输入命令，启动应用程序。当通过命令行加载运行用户开发的程序时，命令行会被‘冷冻’，这是因为被启动的程序与命令行属于同一进程，CPU要把运行的权限交给应用程序，命令行窗口得不到运行的机会，因此看上去像死机一样。这造成的一个问题是，命令行窗口一次只能加载一个应用程序，然后必须等到程序运行结束后，CPU控制权交还给命令行窗口时，它才有机会启动另一个应用程序。我们可以把命令行窗口的程序启动机制进行修改，使得应用程序运行后，控制台仍然能获取CPU的执行权限，但这么改动难度

2018-07-19

9090

java开发C语言编译器：把C实现的快速排序算法编译成jvm字节码

java 编程算法 jvm 人工智能

有了前面一系列的铺垫和准备后，我们终于能走到至关重要的一刻。在本节，我们将用C语言开发快速排序算法，然后利用我们的编译器把它编译成java字节码，让C语言编写的快速排序算法能在java虚拟机上顺利执行，完成本节内容后，编译器可以正确的将下列代码编译成java字节码： void quicksort(int A[10], int p, int r) { int x; int i; i = p - 1; int j; int t; int v; v = r

2018-07-19

6950

面试算法：二分查找法寻找数组截断点

编程算法 java

假设你是知名互联网公司BAT的首席财务官，公司去年的薪资成本是S,由于竞争激烈，公司今年需要成本控制，CEO要求你把总薪资控制为T, T < S。同时CEO希望你对每位员工的收入设定一个截断值P, 每一个年收入高于P的员工，其年薪一律降到P,对于那些年薪达不到P的，薪资保持不动。例如给定五位员工的薪资数值分别为：90， 30， 100， 40， 20，同时T设置为210，那么截断值可以设置为60，也就是工资高于60的，全部降低到60，工资低于60的，收入保持不变，于是五位员工的收入变为：60， 30， 6

2018-07-19

6540

java开发系统内核：创建文件操作API

java api 存储

文件系统是所以操作系统的核心，系统的数据必须以文件的方式存储和组织。我们现在的系统没有硬盘，因此所有信息都存储在磁盘里，在内核加载时，引导扇区程序就会把磁盘上相关数据全都拷贝到内存里，于是所有文件内容在系统启动后，会从磁盘转存到内存中。在前几节，我们已经建立了简易的文件系统，本节，我们为文件系统增加几个有利于文件读取操作的API.根据常用的文件API,我们提供的接口将支持以下几种操作： 1，文件打开 api_fopen 2，文件定位 api_fseek 3，文件读取 api_fread 4，文件

2018-07-19

6070

点击加载更多

社区活动

腾讯技术创作狂欢月

“码”上创作 21 天，分 10000 元奖品池！

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·千货材料·成员作品最新动态