开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

使用bazel构建tensorflow，gcc:内部编译器错误: Killed (程序cc1plus)

使用bazel构建tensorflow时，遇到"gcc:内部编译器错误: Killed (程序cc1plus)"的错误提示，这是由于编译过程中内存不足导致的。解决这个问题的方法有以下几种：

增加系统内存：可以尝试在构建之前增加系统的物理内存或者虚拟内存，以提供足够的内存空间给编译器使用。
调整bazel的内存限制：可以通过设置bazel的内存限制参数来增加可用的内存。可以尝试使用--local_ram_resources=HOST_RAM*0.8参数来设置可用内存的百分比，其中HOST_RAM表示主机的可用内存大小。
优化编译选项：可以尝试使用更低的优化级别来减少编译器的内存使用。可以在构建命令中添加--copt=-O1参数来降低优化级别。
分步构建：可以尝试将构建过程分为多个步骤进行，以减少每个步骤的内存使用量。可以使用bazel的--jobs参数来控制并行构建的任务数量，从而减少内存压力。
升级bazel和gcc版本：可以尝试升级bazel和gcc到最新版本，以获取更好的性能和稳定性。

总结起来，解决"gcc:内部编译器错误: Killed (程序cc1plus)"的方法包括增加系统内存、调整bazel的内存限制、优化编译选项、分步构建以及升级bazel和gcc版本。希望这些方法能够帮助您解决问题。

关于bazel和tensorflow的更多信息，您可以参考腾讯云的相关产品和文档：

Bazel相关产品：腾讯云Bazel
TensorFlow相关产品：腾讯云TensorFlow
Bazel产品介绍：腾讯云Bazel产品介绍
TensorFlow产品介绍：腾讯云TensorFlow产品介绍

相关搜索:Tensorflow 2无法在windows 10上使用bazel进行编译-程序包名称错误如何配置bazel以使用安装在python站点包中的tensorflow构建C++应用程序我如何修复一个C程序的计时器致命错误，使用gcc作为编译器？腾讯云服务器怎么挂游戏腾讯云服务器可以安装win7 64位系统腾讯云服务器怎么创建根目录腾讯云得到外网ip可以转移到其他服务器去腾讯云开传奇服务器系统远程不了腾讯云服务器失败怎么回事啊腾讯云服务器怎么在手机上使用

相关搜索:

页面内容是否对你有帮助？

有帮助

没帮助

相关·内容

Ubuntu 18.04 编译opencv-3.4.16，遇到错误“c++: internal compiler error: Killed (program cc1plus)”

Ubuntu 18.04 使用命令“make -j”编译opencv-3.4.16，遇到错误“c++: internal compiler error: Killed (program cc1plus)...，如果没有参数，会使用无限多的工作进程。之前命令“make -j”在有128GB的服务器上能编译成功。...See for instructions. c++: internal compiler error: Killed...See for instructions. c++: internal compiler error: Killed...See for instructions. c++: internal compiler error: Killed

1.3K1 0

编译优化在微信视频号的落地实践

编译通过但是发现运行问题反馈优化和LTO优化使用中发现的编译器bug编译速度的挑战我们协同业务团队解决了上述问题，以下将我们的实践经验分享出来。.../gcc/cc1': execv: Argument list too long微信的bazel build需要传入非常多的-isystem 参数到gcc中作为预编译头文件。...gcc driver在fork后invoke cc1plus的时候参数超过256K的时候就开始报参数过长的错误：“execv: Argument list too long” 但是系统的限制约为2M，单独的测试案例直接...invoke cc1plus也只会在2M之后报参数过长，需要分析看GCC在什么地方做了额外的设置导致提前报错。...但同时也可能高版本的编译器的检查选项更严格，有些以前没有暴露的错误被暴露出来，导致编译报错，有时是源代码本身的问题，也有些可能是编译器内部的问题，需要按照特定情况去解决。

2551 0

0490-如何为GPU环境编译CUDA9.2的TensorFlow1.8与1.12

这部分编译不同的tensorflow版本需要安装不同版本的bazel，使用太新的版本有时会报错。...A.Tensorflow1.12使用的bazel版本为0.19.2： 1.下载bazel-0.19.2： wget https://github.com/bazelbuild/bazel/releases...使用该--help 命令可以查看其他安装选项。 ? 显示下面的提示表示安装成功： ? 如果使用--user上面的标志运行Bazel安装程序，则Bazel可执行文件将安装在$HOME/bin目录中。...B.Tensorflow1.8使用的bazel版本为0.13.0： 1.下载bazel-0.13.0 wget https://github.com/bazelbuild/bazel/releases/.../configure WARNING: Running Bazel server needs to be killed, because the startup options are different

3.5K3 0

envoy在arm机器上的编译整理

版本 4.安装ninja //本人安装版本是1.10.1 5.安装libstdc++静态库 // yum install -y libstdc++-static 安装完之后，到/usr/lib/gcc...（单独安装的原因参考后面的编译错误。）特别说明：安装命令用的是 yum install -y XXX的方式。 6.安装bazel，这里没有特别的，按照官方文档进行操作就可以了。...4.编译问题二：错误： bazel-out/aarch64-opt/bin/extensions/common/wasm/nlohmann_json.hpp:8494:24: error: comparison...type-limits] 8494 | if ('\x00' <= c and c <= '\x1F') | ~~~~~~~^~~~ cc1plus...总结：网上搜了一圈，也没有找到关于envoy arm 的编译方式，踩了很多坑，便整理了这篇文章，希望对envoy开发和使用的朋友们有帮助。

2381 0

TensorFlow开发环境搭建（Ubuntu16.04+GPU+TensorFlow源码编译）

降低版本网上说cuda8.0不支持5.0以上的编译器，因此需要降级，把编译器版本降到4.9，但我看了CUDA8.0的安装手册《NVIDIA CUDA INSTALLATION GUIDE FOR LINUX...》，并没有发现这一条，《NVIDIA CUDA INSTALLATION GUIDE FOR LINUX》在实际使用中，还是将GCC做了降级（PS，在安装时可以先不降级，看看是否会出问题），GCC降级方法如下...+ /usr/bin/g++ 30 sudo update-alternatives --set c++ /usr/bin/g++ 7 安装Bazel Bazel是一个构建工具，即一个可以运行编译和测试来组装软件的工具...TensorFlow的编译是基于Bazel完成的。.../configure 9.3编译安装 bazel build -c opt //tensorflow/tools/pip_package:build_pip_package bazel build -c

1.7K6 0

【Ubuntu】Tensorflow对训练后的模型做8位（uint8）量化转换

版本 Python 版本 编译器 编译工具 cuDNN CUDA tensorflow_gpu-1.13.1 2.7 、3.3-3.6 GCC 4.8 Bazel 0.19.2 7.4 10.0 tensorflow_gpu...-1.12.0 2.7、3.3-3.6 GCC 4.8 Bazel 0.15.0 7 9 tensorflow_gpu-1.11.0 2.7、3.3-3.6 GCC 4.8 Bazel 0.15.0 7...3.3-3.6 GCC 4.8 Bazel 0.9.0 7 9 tensorflow_gpu-1.6.0 2.7、3.3-3.6 GCC 4.8 Bazel 0.9.0 7 9 tensorflow_gpu...-1.5.0 2.7、3.3-3.6 GCC 4.8 Bazel 0.8.0 7 9 tensorflow_gpu-1.4.0 2.7、3.3-3.6 GCC 4.8 Bazel 0.5.4 6 8 tensorflow_gpu...源码下载1.13版本Tensorflow源码：https://github.com/tensorflow/tensorflow/tree/v1.13.2 使用bazel编译tensorflow量化工具

1.7K3 0

给Linux增加swap内存

有时内存不足时，编译xxx报错cc: 编译器内部错误：已杀死(程序 cc1) Please submit a full bug report, with preprocessed source if.../local/src/php-7.0.23/ext/fileinfo/libmagic/apprentice.c -o ext/fileinfo/libmagic/apprentice.lo cc: 编译器内部错误...：已杀死(程序 cc1) Please submit a full bug report, with preprocessed source if appropriate....step 3: 　　#sudo swapon /home/swap 　　注释：使刚才创建的swap空间 step 4:执行你相关的操作，如make 如果创建了临时空间仍然提示 “g++: 内部错误...：Killed (程序 cc1plus)”，可能分配的空间不够大，可继续分配更大的空间。

6.5K2 0

【原创】记录我一次详细的TensorFlow源代码编译构建安装包总结

于是我去Google搜索了下出现这个错误的原因，发现是因为我们服务器的CPU不支持AVX指令集导致的，而使用pip安装的TensorFlow需要依赖AVX指令集，为了确认我们的CPU是否真的不支持AVX...又不支持又想用咋办，后来经过网上查询了一下，我们可以自己使用TensorFlow的源代码来编译和构建一个TensorFlow的版本，这样的话就可以在不支持AVX指令集的机器上使用TensorFlow了。...在构建TensorFlow之前，我们要先做两件事：下载TensorFlow的源码下载和安装Bazel构建工具在下载TensorFlow源码如果网速比较好的话，可以直接使用下面的命令从...下载和安装Bazel构建工具这里我要特别说一下，一般来讲，Bazel的安装方式有2种，一种是使用Bazelisk来安装，另外一种是手动安装，我使用的是后者。...我们发现，可以正常导入和使用，至此，整个TensorFlow源码的编译、构建以及安装环境完成。

1.9K5 0

tensorflow各个版本的CUDA以及Cudnn版本对应关系

2.7、3.3-3.6 GCC 4.8 Bazel 0.19.2 7.4 10.0 tensorflow_gpu-1.12.0 2.7、3.3-3.6 GCC 4.8 Bazel 0.15.0 7 9...3.3-3.6 GCC 4.8 Bazel 0.10.0 7 9 tensorflow_gpu-1.7.0 2.7、3.3-3.6 GCC 4.8 Bazel 0.9.0 7 9 tensorflow_gpu...-1.6.0 2.7、3.3-3.6 GCC 4.8 Bazel 0.9.0 7 9 tensorflow_gpu-1.5.0 2.7、3.3-3.6 GCC 4.8 Bazel 0.8.0 7 9 tensorflow_gpu...-1.4.0 2.7、3.3-3.6 GCC 4.8 Bazel 0.5.4 6 8 tensorflow_gpu-1.3.0 2.7、3.3-3.6 GCC 4.8 Bazel 0.4.5 6 8 tensorflow_gpu...8 tensorflow_gpu-1.0.0 2.7、3.3-3.6 GCC 4.8 Bazel 0.4.2 5.1 8 现在NVIDIA的显卡驱动程序已经更新到 10.1版本，最新的支持CUDA

4.1K2 0

记录我一次详细的TensorFlow源代码编译构建安装包总结

最近公司给我们分配了2台虚拟机服务器用于强化学习训练，我们在虚拟环境中安装好了TensorFlow环境后，在import tensorflow时发现报了下面的错误：于是我去Google搜索了下出现这个错误的原因...又不支持又想用咋办，后来经过网上查询了一下，我们可以自己使用TensorFlow的源代码来编译和构建一个TensorFlow的版本，这样的话就可以在不支持AVX指令集的机器上使用TensorFlow了。...在构建TensorFlow之前，我们要先做两件事：下载TensorFlow的源码下载和安装Bazel构建工具在下载TensorFlow源码如果网速比较好的话，可以直接使用下面的命令从GitHub...下载和安装Bazel构建工具这里我要特别说一下，一般来讲，Bazel的安装方式有2种，一种是使用Bazelisk来安装，另外一种是手动安装，我使用的是后者。...keras_applications --no-depspip install keras_preprocessing --no-deps 然后我们使用gcc --version查看下我们的gcc

1K1 0

重构基于CMake的构建工具链

但是即便是比较主流的 bazel 和 vcpkg，也无法满足我们的需求。 Bazel的问题 bazel 号称是原生支持分布式编译的构建系统。...而 bazel 构建的包，大多情况下由那个包本身去提供一些config，来实现不同的功能组，而编译的时候需要用户去设置使用哪些功能组。...在使用GCC的时候： gRPC 要 1.33 版本开始升级了protobuf 到 1.34，这是第一个支持 bazel 4 的版本原先依赖的 gRPC 1.28 仅支持 bazel 3。...所以最佳的方法是高版本的gcc使用最新的gRPC，但是 gcc 4.8 仅使用 gRPC 1.33 。...但是某些场景，比如自定义内部源、组件版本好控制和低版本编译器支持它也不是很香。 cmake-toolset 我原先项目管理使用的也是 cmake ，所以现在也是使用的 cmake 和 git。

4.9K1 0

手把手教你用 buildroot 构建根文件系统

使用 busybox 构建文件系统，仅仅只是帮我们构建好了一些常用的命令和文件，像 lib 库、/etc 目录下的一些文件都需要自己手动创建，我们还要自己去移植一些第三方软件和库，比如 alsa、iperf...如果想要构建完整的根文件系统，大家一般都是使用buildroot，它不仅包含了 busybox 的功能，而且里面还集成了各种软件，需要什么软件就选择什么软件，不需要我们去移植。...point strategy = NEON/VFPv4 -> ARM instruction set = ARM 2、配置 Toolchain 此配置项用于配置交叉编译工具链，设置为我们自己所使用的交叉编译器...一个典型的ARM Linux工具链包含arm-linux-gnueabihf-gcc（后续工具省略前缀）、strip、gcc、objdump、ld、gprof、nm、readelf、 addr2line...编译过程需要一定的额外内存，注意需要留好内存，否则会报错如下： g++: internal compiler error: Killed (program cc1plus) Please submit

8.1K3 1

AI运行环境的搭建

为了使安装步骤对操作系统影响最小，安装时不使用root账户以及sudo权限，而是使用了一个普通账户makeuser进行操作（少数步骤需要使用root操作）安装使用到的软件版本 gcc 4.9.4 python...因为这里编译的gcc高版本只用于编译tensorflow，并且不希望对系统原来的gcc产生影响。所以单独创建一个文件夹用于安装编译使用的环境软件。使用 --prefix 可以自定义安装路径。...编译，编译时出现了类似下面的问题后来尝试使用0.4.5未出现此问题 ERROR: /home/krishna/tensorflow/WORKSPACE:3:1: //external:io_bazel_rules_closure...，但安装后运行时会出现 _pywrap_tensorflow_internal.so: undefined symbol: clock_gettime 等类似链接符号错误) 将tensorflow.bzl....so 文件复制到/usr/local/lib下就可以使用了 cp bazel-bin/tensorflow/libtensorflow_cc.so /usr/local/lib/ #将需要的文件放入

1.7K2 0

Tensorflow的安装

Protocol Buffer是TensorFlow系统中使用到的重要工具，Tensorflow中的数据基本是通过Protocol Buffer来组织的。...(2)Bazel Bazel是谷歌开源的自动化构建工具，谷歌内部大部分的应用都是通过它来编译的。...相比传统的Makefile、Ant或者 Maven，Bazel在速度、可伸缩性、灵活性以及对不同程序语言和平台的支持上都要更加出色。...TensorFlow本身以及谷歌给出的很多官方样例都是通过Bazel来编译的。...或者要获得gpu支持的话： $ pip install tensorflow-gpu 3.第一个tensorflow程序： $ python Python 2.7.12 (default,

8612 0

Ubuntu 16.04 Cuda8.0 tensorflow-gpu

，安装的pip无论怎么更新，都是pip8.1.1，不是pip8.1.2,（使用pip-8.1.1的话，在之后安装tensorflow的时候会报错，所以需要升级到8.1.2）如何升级到pip8.1.2 如果你用...（如果你不打算编译源码安装tensorflow的话，是不需要安装bazel的。...我们这里不使用源码安装tensorflow。）...$ sudo apt-get upgrade bazel bazel命令需要工作在workspace文件夹或其子文件夹下 6->安装tensorflow # Ubuntu/Linux 64-bit...import tensorflow 测试一下啦 7->可能出现的错误: 如果更新了 nvidia驱动之后报错(更新之前运行正常),可以尝试安装 sudo apt-get install nvidia-modprobe

9613 0

用Tensorflow让神经网络自动创造音乐

在这里(https://www.tensorflow.org/versions/r0.9/get_started/os_setup.html)安装python、bazel和Tensorflow 注...：我在安装bazel的时候一直出现“Segmentation fault：11”的错误，google了很多解决方法后发现是gcc的安装版本问题，如果你是mac用户，下载了xcode，并不代表你安装了gcc...如果安装失败了，用下载好的bazel再输入“bazel install gcc”，下载完检测一下gcc -v，如果依然是"Segmentation fault：11"错误，恭喜你，遇到和我一样的错误了，...恭喜你，又犯了和我同样的错误：）这个错误是说测试文件太大了，不能一下子全部测试（我16g的内存还不够吗 = =），所以你可以跟我一样手动测试,以其中一个举例： 1 >>>bazel-bin/magenta...如果你有GPU或者愿意等个几天跑程序，可以把迭代次数设置的大一点，等算法收敛后再进行测试。模型训练的好坏直接决定最后得到的音乐的好听程度，所以最好等算法收敛后在进行测试。

1.3K9 0

Tensorflow c++ 实践及各种坑

众所周知，python在开发效率、易用性上有着巨大的优势，但作为一个解释性语言，在性能方面还是存在比较大的缺陷，在各类AI服务化过程中，采用python作为模型快速构建工具，使用高级语言(如C++，java...)作为服务化程序实现是大势所趋。...实现方案对于tensorflow c++库的使用，有两种方法： (1) 最佳方式当然是直接用C++构建graph，但是当前c++tensorflow库并不像python api那样full-featured...， GCC版本 >= 4.8.5 安装组件： protobuf 3.3.0 bazel 0.5.0 python 2.7 java8 机器要求： 4GB内存 a....c++ api加载，报以上错误，采用tensorflow python加载模型报同样错：原因是模型中用到了BatchNorm，修复方式如上面c中给出的方案 (4) 模型加载及运行构建输入输出模型输入输出主要就是构造输入输出矩阵

6.8K4 0

TensorFlow 的 c ++ 实践及各种坑！

众所周知，python在开发效率、易用性上有着巨大的优势，但作为一个解释性语言，在性能方面还是存在比较大的缺陷，在各类AI服务化过程中，采用python作为模型快速构建工具，使用高级语言(如C++，java...)作为服务化程序实现是大势所趋。...实现方案对于tensorflow c++库的使用，有两种方法： (1) 最佳方式当然是直接用C++构建graph，但是当前c++tensorflow库并不像python api那样full-featured...版本， GCC版本 >= 4.8.5 安装组件： protobuf 3.3.0 bazel 0.5.0 python 2.7 java8 机器要求： 4GB内存 a....c++ api加载，报以上错误，采用tensorflow python加载模型报同样错： [1511168812774_4812_1511168890001.jpg] 原因是模型中用到了BatchNorm

6.5K2 0

想提高棋艺？试试这款围棋AI

到此，即使没有绝艺，我也可以自行构建出类似绝艺的围棋AI。...在Linux平台上，没有预编译好的包，对于我等程序员而言，自然难不倒我，下面就聊聊如何从源码build出PhoenixGo，以及如何配合GoReviewPartner。构建PhoenixGo 1....编译环境准备所需的编译软件有：带C++ 11支持的GCC，使用系统默认安装的gcc即可 Bazel 0.19.2，如果你的Bazel版本比这个高，先卸载，然后去Bazel官网下载一个0.19.2的版本...[Default is /usr/bin/gcc]: Do you wish to build TensorFlow with MPI support?...编译使用bazel进行编译： bazel build //mcts:mcts_main 经过漫长的编译，最后终于build完成。 4.

3.3K1 0

【开发环境】Windows 系统中使用 Makefile 构建脚本编译 C 程序 ( 下载并安装 TDM-GCC 编译器 | 配置环境变量 | 编译 Makefile 程序 )

文章目录一、下载 TDM-GCC 编译器 二、安装 TDM-GCC 编译器 三、配置环境变量四、根据 Makefile 脚本编译 C 程序一、下载 TDM-GCC 编译器 ---- 下载并安装 TDM-GCC...编译器 : 下载地址 : https://jmeubank.github.io/tdm-gcc/ 点击 Read more… 链接 , 跳转到 https://jmeubank.github.io/...tdm-gcc/articles/2021-05/10.3.0-release 页面 , 下载中间的 tdm64-gcc-10.3.0-2.exe 文件即可 ; 下载后的 tdm64-gcc-10.3.0...编译器 ---- 双击上述安装文件 , 选择 " Create " 选项 ; 选择第二个版本 ; 设置安装位置 : 选择安装组件 , 默认即可 ; 等待安装完毕 ; 三、配置环境变量 -...; 四、根据 Makefile 脚本编译 C 程序 ---- 使用如下命令编译程序 : mingw32-make -f Makefile.mingw

2K1 0

点击加载更多

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭