RPC全称为Remote Procedure Call，即远过程调用。如果没有RPC，那么跨机器间的进程通讯通常得采用消息，这会降低开发效率，也会增加网络层和上层的耦合度，RPC可以帮助我们解决这些问题。
在前面一系列章节中，我们完成了词法解析的各种算法。包括解析正则表达式字符串，构建 NFA 状态就，从 NFA 转换为 DFA 状态机，最后实现状态机最小化，接下来我们注重词法解析模块的工程化实现，也就是我们将所有算法集合起来完成一个可用的程序，由此在接下来的章节中，我们将重点放在工程实现上而不是编译原理算法上。
这是java编写的C语言词法分析器，我也是参考很多代码，然后将核心代码整理起来，准备放在QQ空间和博客上，目的是互相学习借鉴，希望可以得到高手改进。这个词法分析器实现的功能有打开文件、保存文件、打开帮助文档、文本域内容的剪切和复制和黏贴、进行词法分析 程序的项目结构如图，Word类和Unidentifiable类是两个JavaBean类，存放的参数有两个row(整型)、word(String)，row用于获取行数，word用于获取标识符，LexerFrame是词法分析器的界面类，Analyze封装了进行词法分析的核心代码 ，doc文件夹放一个帮助文档，当用户点击帮助按钮时可以弹出来以帮助用户使用。 Github项目链接：https://github.com/u014427391/lexer1.1.0，欢迎star //核心程序：
Go语言中变量的声明和JavaScript很像，使用var关键字，变量的声明、定义有好几种形式
ANTLR是一款功能强大的语法分析器生成器，可用来读取、处理、执行和转换结构化文本或二进制文件。它被广泛应用于学术界和工业界构建各种语言、工具和框架。Antlr在Hadoop整个生态系统应用较为广泛，如Hive 词法文件是Antlr3写的；Presto词法文件也Antlr4实现的；SparkSQL词法文件是用Presto的词法文件改写的；还有HBase的访问客户端Phoenix也用Antlr工具进行SQL解析的等等。
这篇主要举实际案例说明怎么使用antlr工具、利用antlr生成的Lexer、Parser、TreeParser代码，获取asttree。这些都是hive获取asttree的过程，理解了这些，再理解hive的asttree就很容易了
随着技术的不断的发展，在大数据领域出现了越来越多的技术框架。而为了降低大数据的学习成本和难度，越来越多的大数据技术和应用开始支持SQL进行数据查询。SQL作为一个学习成本很低的语言，支持SQL进行数据查询可以降低用户使用大数据的门槛，让更多的用户能够使用大数据。
python源码阅读： 参考书籍：《python源码剖析》 摘要：写这个系列的目的呢，是想为python的学习画上一个暂时的句号，接下来的重点应该是scala这门语言和其身后的函数式编程思想了。整个文章大概会分为python的对象体系（主要是container对象的字典以及字符串），函数和类的运行机制，模块的动态加载，线程机制，垃圾回收机制。不会做到面面俱到，但是会尽量把底层的代码展现给大家，这次的python的源码使用的是python 2.7.2版本。 一、源码的目录体系和整体架构 File Groups Python Core Runtime Environment Core Modules SCanner Object/Type Structures Library Parser Memory Allocator User-defined Compiler Current State Of Python Modules Code Evauator 简单来说，你可以把python的解释器视为一个优秀的编译原理实践，ANSI C实现的。遵循了最流行的词法分析，解析成token，再语法分析，建立抽象语法树AST，最后compiler根据AST，生成字节码，执行。 目录 概要 Demo python的演示程序，里面包括了CGI，class演示等 Doc python的文档 Grammar python的语法文件 Include python编译时引用的头文件 Lib 标准附加库 Mac Mac用的工具 Misc 各种文件的集合（例如vim） Modules python的C语言扩展 Objects python的对象使用的C语言代码 PC 依存于操作环境 PCbuild 构造win32和x64用的 Parser python用的解析器 Python python的核心
编译器的前端和后端。前端指的是编译器对程序代码的分析和理解。前端阶段只与语言的语法有关，而和目标机器无关。后端则是生成目标机器的目标代码有关。第一节说说编译器的前端技术。
理解编译器内部原理，可以让你更高效利用它。按照编译的工作顺序，逐步深入编程语言和编译器是怎样工作的。本文有大量的链接、样例代码和图表帮助你理解编译器。
（一） 在前几日的文章『软件随想录』里，我随性写了一句：「现在似乎已经不是lex/yacc 或 bison/flex的时代了。我亲眼看见一个同事在费力地用perl一行行解析某个系统的数据文件，却压根没想到写个BNF。BNF对他来说，不是一种选择。」 很多同学不解，问我：lex/yacc不是写编译器 [1] 的么？我又不发明新的语言，它们对我有什么用？ 从这个问题里，我们可以见到国内本科教育荼毒之深。象牙塔里的讲编译原理的老师们，估计用lex/yacc也就是写过个毫无用处的toy language，然后把自己
本文是《打破国外垄断，开发中国人自己的编程语言》系列文章的第1篇。本系列文章的主要目的是教大家学会如何从零开始设计一种编程语言（marvel语言），并使用marvel语言开发一些真实的项目，如移动App、Web应用等。marvel语言可以通过下面3种方式运行：
前段时间，机器之心刚介绍过以文言文为编程语言的 CMU 本科生项目。近日，圈内又惊现以东北方言词汇为基本关键字的编程语言（dongbei），此项目一出便有天雷勾地火，宝塔镇河妖之势。作者是一位 Google 的高级软件工程师/技术主管，同时也是 Google C++测试框架 googletest 以及 googlemock 的原作者。
前段时间，机器之心刚介绍过以文言文为编程语言的 CMU 本科生项目。近日，圈内又惊现以东北方言词汇为基本关键字的编程语言（dongbei），此项目一出便有天雷勾地火，宝塔镇河妖之势。作者是一位 Google 的高级软件工程师 / 技术主管，同时也是 Google C++ 测试框架 googletest 以及 googlemock 的原作者。
词法分析器的目的是识别高级语言中编写的代码转换为token，也就是识别高级语言中的每个单词token
喵，猫头虎博主今天要分享的是在悉尼Google技术用户组（GTUG）的两次精彩Go语言演讲。🔎 Rob Pike带来了关于Go语言新模板包中词法解析器组件的设计，而Andrew Gerrand则展示了使用App Engine API构建的简易实时聊天应用。本篇博客将带你领略这两场演讲的亮点，并探讨它们在Go开发中的应用。
各位好。我一直在专注于开发一个称为“Pinecone”的语言，已经持续6个月的时间。
用c语言手搓一个600行的类c语言解释器: 给编程初学者的解释器教程（1）- 目标和前言 用c语言手搓一个600行的类c语言解释器: 给编程初学者的解释器教程（2）- 简介和设计 用c语言手搓一个600行的类c语言解释器: 给编程初学者的解释器教程（3）- 词法分析 用c语言手搓一个600行的类c语言解释器: 给编程初学者的解释器教程（4）- 语法分析1：EBNF和递归下降文法 用c语言手搓一个600行的类c语言解释器: 给编程初学者的解释器教程（5）- 语法分析2: tryC的语法分析实现 用c语言手搓一个600行的类c语言解释器: 给编程初学者的解释器教程（6）- 语义分析：符号表和变量、函数
我们知道，高级语言，一般的如c，java等是不能直接运行的，它们需要经过编译成机器认识的语言。即编译器的工作。
对一个已有的项目进行语法分析，首先是要找到语法分析文件，分析语法文件之间的关系，然后根据语法分析文件提供的接口，确定语法解析在这个体系中所处的位置。
元数据是关于数据的数据，是对数据的描述，元数据又分为三类：管理元数据、业务元数据和技术元数据。而字段或表级血缘关系就是技术元数据，关于业务元数据和管理元数据等元数据相关知识笔者给出前期文章分享链接，笔者这里不再赘述。
本文不对词法和语法、以及flex和bison进行介绍，如有需要，可以阅读《RPC的实现》。本文试图用直接的方式，以最短的篇幅介绍一个最简单的IDL编译器实现。
黑客是一个中文词语，在台湾地区对应的中文词语为骇客，皆源自英文hacker，不同地区的中文使用习惯造成了翻译的差别。实际上，黑客（或骇客）与英文原文Hacker、Cracker等含义不能够达到完全对译，这是中英文语言词汇各自发展中形成的差异。Hacker一词，最初曾指热心于计算机技术、水平高超的电脑专家，尤其是程序设计人员，逐渐区分为白帽(DengKelen)、灰帽、黑帽等，其中黑帽（black hat）实际就是cracker。到了今天，黑客一词已被用于泛指那些专门利用计算机病毒搞破坏的家伙，对这些人的正确英文叫法是Cracker。在媒体报道中，黑客一词常指那些软件骇客(software cracker)，而与黑客相对的是红客。当然，也有正义的黑客
大家好久不见了，最近生活发生了很多变故，同时我也大病了一场，希望一切都尽快好起来吧。今天跟大家分享下Spark吧，谈谈如何修改Spark SQL解析，让其更符合你的业务逻辑。好，我们开始吧...
在谈谈我对 JFinal Marketing 的一些看法那篇博文的评论中 我们谈论到了 ANTLR, 这里继续和波总谈谈在技术上我对这方面的理解.
本小节，我们学习翻译环境和运行环境，其中我们将学习编译环境的4个阶段：预编译，编译（词法分析，语法分析，语义分析），汇编，链接，文章干货满满！学习起来吧😃！
简单讲，编译器就是将“一种语言（通常为高级语言）”翻译为“另一种语言（通常为低级语言）”的程序。一个现代编译器的主要工作流程：
最早的C语言仅仅用来编写小而美的代码，总共不超过100行，随着计算机软件的发展，小程序变成了大型软件工程，整个项目是由多人协同开发完成的，一个人显然已经玩不动了，这时候也就出现了模块化编程的概念。
作为C语言最经典的代码，大家都可以轻易写出。但是代码的运行过程却很少有人清楚，接下来我将介绍代码运行的奥秘。
Babel is a JavaScript compiler！这是Babel官方对于babel的定义。身为前端工程师，因此有必要了解编译原理，幸运的是，“The Super Tiny Compiler”开源项目利用JavaScript写了一个简单的编译器。
在编译和链接过程中，可以使用不同的编译器和链接器来完成这些步骤。常见的C语言编译器包括GCC、Clang和MSVC等，而常见的链接器包括GNU ld和Microsoft Linker等。
编译器构造 一、 编译器简介 前面谈到静态链接器构造的基本流程，最后提到所构造的链接器若要能正常工作的前提是需要构造一个能生成符合链接器输入文件格式的编译器，本文构造一个符合这种具体格式要求编译器。但
Parser就是将SQL字符串切分成一个个Token，再根据一定语义规则解析为一棵语法树。我们写的sql语句只是一个字符串而已，首先需要将其通过词法解析和语法解析生成语法树，Spark1.x版本使用的是scala原生的parser语法解析器，从2.x后改用的是第三方语法解析工具ANTLR4， 在性能上有了较大的提升。
Go语言起源 以下早期语言对Go语言的设计产生了重要影响： C Go语言有时候被描述为“C类似语言”，或者是“21世纪的C语言”。Go从C语言继承了相似的表达式语法、控制流结构、基础数据类型、调用参数传值、指针等很多思想，还有C语言一直所看中的编译后机器码的运行效率以及和现有操作系统的无缝适配。 Pascal Modula-2 包的概念 Oberon 摒弃了模块接口文件和 模块实现文件之间的区别 面向对象特性所提供的方法的声明语法 Oberon-2 包的导入和声明语法 CS
作者简介： 程磊，一线码农，在某手机公司担任系统开发工程师，日常喜欢研究内核基本原理。 一、编译系统的形成与发展 1.1 手工硬件编程 1.2 面向硬件编程 1.3 高级语言编程 1.4 编译系统的组成 二、编译系统的逻辑结构 2.1 狭义编译 2.2 最狭义编译 2.3 链接过程 2.4 组建系统 三、编译原理简介 3.1 词法分析 3.2 语法分析 3.3 语义分析 3.4 中间码生成 3.5 中间码优化 3.6 机器码生成 3.7 机器码优化 3.8 小型编译器推荐 四、静态链接与动态链接 4.1 静
get_token()接受的入参是一个Token结构体指针，函数会分割出记号装入Token结构体并返回。下面是上面两个函数声明和Token结构体的定义：
机器语言：计算机只认识由0和1构成的机器语言，每台机器自己独特的指令系统即机器语言。 机器语言->汇编语言->高级语言 编译程序最初的定义是把一种高级语言设计的源程序(面向人的)翻译成另一种等价的低级程序设计语言(面向硬件的)即机器语言或汇编语言。
在c语言的实现中，存在两个环境 翻译环境：在这个环境中源代码被转换成可执行的二进制指令 运行环境：实际执行代码
ANTLR实际上有两件事：一种将您的语法转换为Java（或其他目标语言）的解析器/词法分析器的工具，以及生成的解析器/词法分析器所需的运行时。即使您使用ANTLR Intellij插件或ANTLRWorks来运行ANTLR工具，生成的代码仍将需要运行时库。
导读：C语言程序如何工作，首先需要编译链接成可执行文件，然后就可以运行在不同的环境中，这个“环境”的意思就是比如说，电脑，手机，路由器，蓝牙音箱等等智能设备中，其中编译器启到了关键的桥接作用。本章主要先从C语言编译的全过程开始分析，然后介绍常用的编译器工具，最后介绍本系列博客使用的免费开发软件Dev-C++安装过程。
在上一个版本实现的脚本解释器 GScript 中实现了基本的四则运算以及 AST 的生成。
项目地址：https://github.com/zhanyong-wan/dongbei
在ANSI C的任何一种实现中，存在两个不同的环境。 第1种是翻译环境，在这个环境中源代码被转换为可执行的机器指令。 第2种是执行环境，它用于实际执行代码。
即从记号构建分析树（parse tree）的处理。分析树也叫作语法树（syntax tree）或抽象语法树（abstract syntax tree, AST）。
对于一些刚开始接触 Nebula Graph 开源库的小伙伴来说，刚开始可能和我一样，想要提高自己，看看大神们的代码然后试着能够做点什么，或许能够修复一个看起来并不是那么困难的 Bug。但是面对如此多的代码，我裂开了，不知道如何下手。最后硬着头皮，再看了一遍又一遍代码，跑了一个又一个用例之后终于有点眉目了。
https://www.cnblogs.com/fisherss/p/13905395.html
LLVM的编译过程相当复杂，iOS代码运行需要经过：预处理、编译、汇编、链接四个关键阶段，具体的流程如下图：
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
对象存储
云直播
