使用ramdisk加快Dockerfile构建速度

文章/答案/技术大牛

发布

1回答

docker、docker-compose、dockerfile、tmpfs

我们运行一个从大型代码库编译多个工件的构建过程。在使用SSD的像样的spec i7上，这需要大约20分钟，但是当我转向使用tmpfs时，时间会下降到大约3分钟。我们使用docker-compose打包构建过程，以确保所有开发人员获得相同的构建环境，但也希望他们能够在没有更改的情况下使用Docker缓存中的工件运行项目。感知到的构建时间是一个问题，但我们也担心磁盘驱动器的耗尽，因为进程在每次构建时都会写入大于1 1Gb的数据。有没有办

浏览 33提问于2020-08-03得票数 0

回答已采纳

4回答

Visual Studio 2010是否从四核与双核计算机中获益？编译是多线程的吗？

performance、visual-studio-2010

我有一台Windows XP机器，有一个3.6G的双核CPU和4MB。我对表演不是很满意。我想知道VS2010中的编译是否是多线程的，VS2010是否从双核机器切换到四核机器中受益？

浏览 1提问于2010-05-12得票数 7

1回答

加速嵌入式linux编译进程

performance、embedded-linux、cross-compiling、openwrt

而且重新编译的速度非常慢。为了减少这种痛苦，购买了基于AMD Threadripper 3970X的工作站，具有128 1Tb和1TB固态硬盘。我使用RAMDISK： $ sudo mkdir /mnt/ramdisk $ sudo mount -t tmpfs -o rw,size=64G tmpfs /mnt/ramdisk 存储所有的源文件如何加快GCC C/C++交叉编译的速度？一些搜索将我指向distcc和

浏览 51提问于2021-08-05得票数 0

2回答

如何更改全局maven默认目标目录？

java、maven、settings、pom.xml、target

我猜到要更改maven构建的输出目标目录。正如我所看到的，更多的人问过，我对它做了一些修改：我希望为我的所有m2项目生成的所有文件都进入特定的、不同于默认的构建目录。例如，如果我有项目P1和P2，默认的构建目录是P1/target和P2/target。我想把它改为P1/target和P2/target/ ，或者更好的-temp/p1/和/temp/p2/。看起来有几个maven插件将构建目录路径建立在"proj

浏览 0提问于2018-02-19得票数 1

1回答

码头-组合与对接-合成-构建与对接-构建-构建-无缓存

docker、docker-compose

我不知道这两者有什么区别。

浏览 3提问于2016-10-12得票数 235

2回答

存储在ramdisk中并以符号链接到项目的cmake构建目录会导致make失败

cmake、gnu-make、ramdisk

我正在尝试使用ramdisk作为构建目录来加快构建过程。我已经创建了ramdisk：在ramdisk上，我创建了build dir：然后我将ramdisk</e

浏览 4提问于2020-10-09得票数 0

2回答

使用码头构建和tmpfs构建一个码头形象？

docker、dockerfile、ramdisk、tmpfs

问:如何在Dockerfile或docker build命令行中指定希望在构建容器中安装tmpfs？这是在拆分构建的上下文中--第一个容器将使用RAM磁盘，从源构建应用程序，第二阶段将结果复制到一个新容器中。似乎是相似的，但我的动机不同。我不太关心陈旧的图像层持续存在，但我关心的是构建的性能。在Docker之外进行实验时，当整个源树在RAM中而不是在磁盘上时，构建我正在使用的特定应用程序的速度要快4倍以上。但是，我似乎在任何地方都找

浏览 3提问于2019-02-11得票数 7

回答已采纳

1回答

如何在声明式Jenkins管道中使用Docker的--缓存--生成标记？

docker、jenkins、jenkins-pipeline、docker-build

我使用声明式Jenkinsfile在Docker容器中运行一些阶段。该过程工作正常，但构建时间通常非常慢，因为我们的CI有相当多的奴隶，如果构建发生在一个没有层缓存的从机上，整个构建需要一段时间。我已经读过，如果指定了--cache-from标志，Docker可以加快构建速度。如何指定缓存-从标志和外部注册表的URL和凭据？pipeline { environment { REPO

浏览 1提问于2017-10-04得票数 6

回答已采纳

1回答

为什么要创建<none>映像，为什么Docker不清理它们？

docker

我知道如何移除容器和图像。运行docker images会给我这样的结果：go_dev latest f6ed22ea5c46 About a minute ago 624.7 MB <none

浏览 2提问于2015-06-23得票数 2

回答已采纳

1回答

是否有可能同时建立一个多阶段的形象？

docker、parallel-processing、docker-build

我有一个相当大的Dockerfile，它有多个层。其中一些层需要相当长的时间。我注意到许多事情并不相互依赖。示例:假设您有一个类似于此的Dockerfile。现在，我想调用一个docker build --some-flag，它并行构建所有的阶段，除非它们必须彼此工作。编辑：我唯一能想到的就是将<em

浏览 3提问于2020-05-21得票数 10

2回答

在构建服务器上使用ramdisk是否明智？

build、build-process、continuous-integration

在我的公司，我们目前正在研究各种策略，以加快我们的CI建设。我们已经分析了我们的构建并确定我们受到了I/O瓶颈的限制。我建议使用ramdisk作为签出和构建文件的位置。当然，构建输出和日志将存储在物理磁盘上。这是一件明智的事情，还是这种方法有明显的缺点？我并不是在寻找有关硬件方面的答案，而是寻找公共构建系统(如MSBuild)和ramdisk之间的交互是否会导致任何问题，以及是否存在其他我需要注意的风险。

浏览 5提问于2010-08-09得票数 17

回答已采纳

2回答

Python:将7 GB的文本文件快速加载到unicode字符串中

python、memory、ctypes、shared-memory、ipython

(我使用的是EC2，所以如果绝对必要的话，我可以购买更多的内存。)mount -t tmpfs none /var/ramdisk -o size=7g谢谢!

浏览 0提问于2010-09-06得票数 2

1回答

加快码头建设，争取更好的码头管理

go、docker

我有一个Dockerfile，是FROM golang:1.6-alpine。在执行docker build时，我希望尽可能多地使用坞映像缓存来加快速度。但是，这会导致只在那时构建有价值的包(这是构建时间的很大一部分)。FROM golang:1.6-alpine ADD vendor

浏览 2提问于2016-07-27得票数 2

2回答

记忆中的后遗症值得一试？

postgresql、in-memory-database

我得到的第一个想法是将Postgres数据文件夹放到RAMdisk中。理论上，这应该使I/O比使用SSD更快。如果您有在内存中运行postgres的经验，请与我们分享。我读过这样的文章：；并且仍然试图在RAMdisk的想法中占据优势。

浏览 0提问于2020-02-04得票数 1

4回答

优化使用Ramdisk进行Eclipse开发

eclipse、ramdrive

我遇到了几个Ramdisk驱动程序，它们可以从操作系统隐藏的RAM创建虚拟磁盘，我正在寻找如何最好地使用740MB虚拟磁盘来加速我们环境中的开发。一种选择是将Vista配置为交换到Ramdisk。这是可行的，并且显著地加快了低内存情况下的开发速度。但是，可供操作系统使用的3.3 OS通常就足够了，而且在许多情况下，我们不会太多地使用交换文件。另一种选择是使用Ramdisk作为存放临时文件的位置。使用Vista mkl

浏览 7提问于2009-12-03得票数 12

回答已采纳

1回答

这对码头工人来说正常吗？

docker

我正在建立一个图像，安装蚂蚁，maven，幻影，咕哝-cli，但当我跑。需要一段时间才能开始将生成上下文发送到docker，然后大小为这是正常的还是我能做些什么来加速这件事？

浏览 3提问于2015-01-14得票数 0

回答已采纳

3回答

有没有支持DATE功能的内存数据库？

unit-testing、postgresql

我正在为一个使用postgresql的DAO做一些单元测试。我的DAO使用的一些SQL查询涉及日期函数。是否有内存中的数据库支持与postgresql类似的功能？目前我正在寻找对DATE函数的支持，但我显然可以预见自己将来会使用其他函数。

浏览 0提问于2010-05-02得票数 1

回答已采纳

2回答

在开发周期中监视或加速ASP.NET编译的技巧

asp.net、visual-studio-2008、msbuild

我使用的是一个大型ASP.NET应用程序。有时，我会对bin/目录中的DLL或一些代码隐藏文件等进行一些更改。这些更改会导致ASP.NET重新编译一些文件，复制到影子目录等。2.我可以监控(使用一些调试工具) ASP.NET实际在做什么吗？

浏览 1提问于2009-08-11得票数 2

回答已采纳

3回答

Docker用gradle构建jar文件耗时太长

java、spring-boot、docker、gradle、dockerfile

我有这个Dockerfile，我想用gradle构建一个spring引导项目，然后运行它，但是构建需要100秒钟才能完成，但是在我的本地机器上，它构建得很快。我确信这是一个缓存问题，但我不知道如何加快速度，我对Docker有点陌生 COPY --chown=gradle:gradle

浏览 25提问于2022-11-16得票数 1

1回答

是否有一种更容易的方法来测试PHP源代码在多平台上使用Docker映像？

docker、testing、dockerfile、docker-machine、docker-image

此外，还有可能使用像SQLite这样的不同的数据库后端。为了测试特定的功能，我编写了一些很好的测试。我想重用这个测试，并在不同的环境中自动运行我的测试。我想用码头来做这个。但我对码头很陌生。是否有更简单的方法在多平台上使用Docker映像测试PHP源代码？

浏览 1提问于2018-02-22得票数 0

回答已采纳

点击加载更多