首页
学习
活动
专区
工具
TVP
发布

Spark发展历史

Spark是一种通用大数据计算框架,使用了内存内运算技术。今天加米谷大数据就来简单介绍一下Spark简史。...Spark简史 1、2009年,Spark诞生于伯克利大学AMPLab,属于伯克利大学研究性项目; 2、2010 年,通过BSD 许可协议正式对外开源发布; 3、2012年,Spark第一篇论文发布...,成为了Aparch基金项目;发布Spark Streaming、Spark Mllib(机器学习)、Shark(Spark on Hadoop); 5、2014 年,Spark 成为 Apache 顶级项目...Spark来替代MapReduce、Hive、Storm等传统大数据计算框架; 7、2016年,推出dataset(更强数据分析手段); 8、2017年,structured streaming 发布...; 9、2018年,Spark2.4.0发布,成为全球最大开源项目。

3.7K20

YznCMS发展历史

前言 YznCMS系统磕磕绊绊历经到2021,已经有6年有余,岁月是把杀猪刀,我已经从一个年轻帅小伙蜕变成油腻中年,感谢一直支持和使用yzncms忠实用户们,让我们一起回顾它发展岁月。...2015年 2015年其实也接触thinkphp不久,当时还是用着phpcms,织梦等一些程序建站,后来就想着自己试着做一套cms,经历一个月时间,很粗糙yzncms就此诞生,采用了thinkphp3.2...图片 图片 图片 图片 2017年 2017年正式免费开源,使用了码云作为唯一开源地址,采用了最新版本thinkphp5.0开发,相对tp3.2版本要增强了不少,但是BUG很多,所以基本使用者都是学习使用...图片 图片 图片 2019年 2019年之前基本还没有多少人使用,在码云上面也就几十号人关注,截止到现在已经有近千人关注, 图片 之后采用了最新tp5.1版本和layui,在界面和功能得到了很大提升...,系统开始得到很多人关注,并作为商业使用,同时申请了并获得了软件著作权。

62130
您找到你想要的搜索结果了吗?
是的
没有找到

FPGA发展历史

FPGA发展历史 PLD简介 在过去十年中,可编程逻辑器件(PLD)市场不断增长,对PLD需求不断增加。具有可编程特性且可编程芯片称为PLD。PLD也称为现场可编程器件(FPD)。...在PLA进化之后,可编程逻辑器件发生了真正进化。之后,SPLD、CPLD和FPGA在20世纪80年代早期发展起来。早期可编程逻辑器件如图9.1所示。...逻辑容量映射到单场可编程器件逻辑量称为逻辑容量。逻辑容量以门阵列中逻辑门数量形式给出。逻辑容量可以认为是两个输入与非门或通用门数量。 现场可编程设备最大工作频率是时序逻辑性能度量。...转换设计成本 25万至30万美元 $0 转换工具额外成本 10万至20万美元 $0 单位成本 低 危险性 高 在系统中进行更改灵活性 不灵活 灵活 从原型到生产设计转换 附加工程...基于FLASHFPGA 在这种类型FPGA中,FLASH用于存储配置数据。因此,该FPGA主要资源是FLASH。因此,这类FPGA功耗较低,并且对辐射影响耐受性较差。

1.3K50

JAVA语言发展历史

1、Java语言介绍 Java是一门面向对象编程语言,不仅吸收了C语言各种优点,还摒弃了C里难以理解多继承、指针等概念,因此Java语言具有功能强大和简单易用两个特征。...Java语言作为静态面向对象编程语言代表,极好地实现了面向对象理论,允许程序员以优雅思维方式进行复杂编程。...2、Java语言发展史 詹姆斯·高斯林(James Gosling),SUN– (Stanford University Network斯坦福大学网络公司) 1995年5月23日,Java语言诞生 1996...2011年7月 JavaSE7.0(市场主流版本) 2014年3月 JavaSE8.0 2017年9月 JavaSE9.0 java语言特点是,简单易用、安全可靠、主要面向Internet编程。...从问世以来,发展就非常迅速。 !

55820

编程范式发展历史

编程范式是指特定编程风格或者方法论,每一种编程范式都代表了一种特定视角来思考和解决问题。编程范式发展历史是计算机科学和软件工程发展一部分,反映了技术进步和行业需求变化。...以下,我们将对编程范式主要发展历史进行详细探讨。 1. 机器语言与汇编语言 在计算机诞生初期,程序员使用机器语言进行编程。机器语言是一种低级编程语言,它直接对应计算机硬件指令集。...汇编语言是一种比机器语言稍高级编程语言,它用易于理解符号代替了机器语言二进制代码。然而,汇编语言依然很难编写和维护,因为它缺乏高级抽象机制。 2....面向过程编程 随着计算机科学发展,人们开始寻找更高效编程方式。在1950年代和1960年代,面向过程编程开始流行起来。...结语 编程范式发展历史反映了计算机科学和软件工程进步。每一种编程范式都有其优点和适用场景,没有哪一种编程范式是适合所有问题

19630

Consul 历史发展

Consul 发展始于 HashiCorp 公司内部一个项目,旨在解决其在构建云基础设施时遇到服务发现和配置管理问题。...在使用和改进该项目的过程中,HashiCorp 决定将其开源并作为一个独立产品发布。Consul 首个版本是基于 Go 语言开发,并提供了诸如服务发现、健康检查、分布式锁和配置管理等功能。...随着时间推移,Consul 发展迅速,吸引了越来越多用户和开发者加入。...Consul 发展历程可以概括为以下几个阶段:初期阶段(2014-2015年):发布了最初版本 Consul,提供了服务发现、健康检查、分布式锁和配置管理等基本功能。...快速发展阶段(2016-2018年):Consul 发展迅速,引入了对多数据中心和插件机制支持,发布了多个版本,不断完善其功能和性能。

53620

Linux起源和发展历史

Linux操作系统历史可以追溯到上个世纪80年代末和90年代初Unix操作系统和自由软件运动。 Unix操作系统 Unix是由AT&T贝尔实验室开发一种多用户、多任务操作系统。...Unix初衷是为了满足贝尔实验室开发新型计算机需求,但是随着时间推移,Unix逐渐成为了主流操作系统之一。 在Unix系统中,所有操作都是通过命令行界面完成。...随着时间推移,Linux逐渐成为了一个完整操作系统,并在全球范围内得到了广泛应用。 Linux发展历程 Linux在发布后不久就开始迅速发展。...这是Linux发展重要里程碑,因为它为Linux赢得了商业上认可和支持。 随着时间推移Linux社区不断壮大,越来越多的人加入了Linux开发行列。...1994年,GNU计划创始人理查德·斯托曼加入了Linux开发,为Linux社区发展做出了重要贡献。

1.3K00

等保2.0发展历史

1994年国务院颁布《中华人民共和国计算机信息系统安全保护条例》,规定计算机信息系统实行信息安全等级保护。...2007年9月,四部委联合颁布《关于开展全国重要信息系统安全等级保护定级工作通知》。...等保2.0时代,将根据信息技术发展应用和网络安全态势,不断地丰富制度内涵、拓展保护范围、完善监管措施,逐步健全网络安全等级保护制度政策、标准和支撑体系。...2、等级保护对象不断地拓展 随着云计算、移动互联网、大数据、物联网、人工智能等新技术不断地涌现,计算机信息系统概念已经不能够涵盖全部,特别是互联网快速发展带来大数据价值凸显,等级保护对象外延将不断拓展...第六基因数据(新), 第七经处理可识别特定个人生物识别数据(新) 在个人信息安全上要求是一致,以三级等保为例,其中对于个人信息要求有:

1.5K30

1.1.3、 Google Analytics发展历史

2005年,Google收购了Urchin,后者前身是成立于1995年(成立时间比Google还早)Web Depot——主要是在San Diego(圣迭戈)提供网站开发和服务器托管。...虽然免费版GA有一定限制,但能满足绝大部分需求,因此深受相关用户欢迎。...在其推出后一周内,注册用户就超过了10万,数据量是Google预期4倍,使得Google不得不暂停了GA注册,直到一年后才继续开放。...GA发布后,最初版本功能比较简单,但每年Google都为GA增加一些新功能。图1-1展示是从2005年至今GA新增功能。 ?...虽然Urchin在收购初期也在不断加强与Google其他产品关联,如Adwords等,但2012年后就不再更新了,并于2013年正式退出历史舞台。

72910

机器学习发展历史回顾

购买链接 书勘误,优化,源代码资源 机器学习是现阶段解决很多人工智能问题主流方法,作为一个独立方向,正处于高速发展之中。...100多年来发展历史,完成对机器学习寻根问祖之旅。...但它们对整个机器学习发展所起作用不能被忽略。 从1980年开始,机器学习才真正成为一个独立方向。在这之后,各种机器学习算法被大量提出,得到了快速发展。...另外,没有一种机器学习算法在大量问题上取得压倒性优势,这和现在深度学习时代很不一样。 无监督学习 相比于有监督学习,无监督学习发展一直和缓慢,至今仍未取得大突破。...聚类 聚类算法历史与有监督学习一样悠久。层次聚类算法出现于1963年[26],这是非常符合人直观思维算法,现在还在使用。

96220

WMS发展历史与趋势

01中国WMS发展 相较于国外在1980年开始发展物流软件相比,成熟仓储管理系统产品与概念在大约2000年左右进入中国,经过十几年蓬勃发展国人对于仓储系统认知与定位也越来越清楚,能够理解仓储系统管理范围与著重目标在哪里...其馀在选型中常考虑因素诸如公司规模、客户群多寡、谘询顾问实力、厂商历史等,除了全球化这点以外,國內外WMS厂商差距也确实日渐缩小,包括超大型复杂物流中心案例对于国内厂商来说也是日渐增多。...03 WMS发展趋势 最初仓库系统发展模式为按需开发,风险、开发时效、最佳实践方式等因素让人们眼球聚焦到了成熟套装软件系统上,在此姑且不论何种方式为最佳,有人相信应该是"七八分标准功能,二三分客户化订制...,因此中长期来说仍是要付出修改成本,在国内仓储系统市场,某些厂商作法是先以低价进入项目再慢慢以高昂二期修改费用赚回利润,或是项目过多无法即时回应,也是当前许多采用外购仓储软件企业心目中痛点,甚至影响限制了业务发展...綜合來说,"开源"、"工具化"、"互联网化"才是未来物流供应链软件真正趋势,也才是真正能作为长期物流支持系统发展圭臬。

1.1K30

计算机发展历史

大家好,又见面了,我是你们朋友全栈君。 计算机发展历史 电脑发展历史 电脑学名叫计算机,电脑是用来做计算。...15世纪,随着天文和航海发展,计算工作越来越繁重,计算工具急需改进。...在后来电子计算机开始发展最初几年中,在多款著名计算机中我们均能找到自动提花机身影。...以历史目光审视他们发明,正是这种程序设计和数据处理,构成了电脑“软件”雏形。 1896年霍列瑞斯博士创办了IBM公司前身。...到了现在,制造出来计算机都是机械,机械计算机向电子计算机发展过渡时期发生主要事件。 1906年,美国德福雷斯特发明了电子管,为计算机发展奠定了基础。

61470

跨平台方案历史发展逻辑

于是,跨平台概念走进了我们视野。 本质上讲,跨平台开发是为了增加业务代码复用率,减少因为要适配多个平台所带来工作量,从而降低开发成本。一套代码多端使用,这样也能够保证一致用户体验。...这类交互协议,就是我们通常说JS Bridge(桥接)。 这种开发模式既有原生代码,又有web应用代码,因此又被称为Hybrid开发模式。...实际上,Hybrid开发方案是跨平台历史上最成功例子! 最后,给一张Hybrid开发框架流程图吧: ?...面对这样现实,我们很快就想到:能否对笨重Web容器进行功能裁剪,在仅保留必要Web标准和渲染能力基础上,使得友好开发体验与稳定渲染性能保持一个平衡? 答案当然是可以。...React Native依托于Facebook,经过4年多发展已经成长为跨平台开发领域实际领导者,并拥有较为丰富第三方库和开发社区。

1.5K50

机器学习发展历史回顾

导言 机器学习是现阶段解决很多人工智能问题主流方法,作为一个独立方向,正处于高速发展之中。最早机器学习算法可以追溯到20世纪初,到今天为止,已经过去了100多年。...100多年来发展历史,完成对机器学习寻根问祖之旅。...但它们对整个机器学习发展所起作用不能被忽略。 从1980年开始,机器学习才真正成为一个独立方向。在这之后,各种机器学习算法被大量提出,得到了快速发展。...另外,没有一种机器学习算法在大量问题上取得压倒性优势,这和现在深度学习时代很不一样。 无监督学习 相比于有监督学习,无监督学习发展一直和缓慢,至今仍未取得大突破。...聚类 聚类算法历史与有监督学习一样悠久。层次聚类算法出现于1963年[26],这是非常符合人直观思维算法,现在还在使用。

79730

机器学习发展历史回顾

机器学习是现阶段解决很多人工智能问题主流方法,作为一个独立方向,正处于高速发展之中。最早机器学习算法可以追溯到20世纪初,到今天为止,已经过去了100多年。...100多年来发展历史,完成对机器学习寻根问祖之旅。...但它们对整个机器学习发展所起作用不能被忽略。 从1980年开始,机器学习才真正成为一个独立方向。在这之后,各种机器学习算法被大量提出,得到了快速发展。...从1980年开始到2012年深度学习兴起之前,有监督学习得到了快速发展,这有些类似于春秋战国时代,各种思想和方法层出不穷,相继登场。...另外,没有一种机器学习算法在大量问题上取得压倒性优势,这和现在深度学习时代很不一样。 无监督学习 相比于有监督学习,无监督学习发展一直和缓慢,至今仍未取得大突破。

2.3K30

操作系统发展历史

用户需求提升和硬件技术发展,是操作系统发展必要条件和基础。...计算机发展经历了4个阶段,电子管计算机(1945-1955)、晶体管计算机(1955-1965)、集成电路计算机(1965-1980)、大规模集成电路计算机(1980-至今)。...3.多道批处理系统 在上述单道批处理系统中,在程序A进行IO操作那段时间里,CPU是处于空闲状态,我们能不能把这段CPU空闲时间利用起来,利用此时CPU去执行程序B计算过程?...分时系统在这样背景下诞生,因此分时系统是指在一台主机上连接了多个终端并由此组成系统,该系统允许多个用户同时通过自己终端,以交互方式使用计算机,共享主机中资源。...在不长时间内使所有的作业都执行一个时间片时间,便可以使每个用户都能及时地与自己作业进行交互,从而使用户请求得到及时响应。这样就解决了在分时系统中最重要及时接收、及时处理问题。

2.5K00
领券