[Linux]非root的R环境被conda破坏后如何恢复?
记录说明
这篇文章本来是用来记录Linux非root环境下安装PMCMRplus包折腾过程,但后来试过了各种方法安装不上这个R包后,我换上了Miniconda来安装。经前人提醒,一开始安装Miniconda我是没加入环境变量的。但一直激活不了虚拟环境,所以后来我又加入了环境变量试着安装,结果这一弄还真的污染了我原有的环境,很多R包都加载和下载不了了。于是我卸了conda,重新安装R。但环境变了后,不管我是安装新的函数库,还是用之前的编译好的依赖库,怎么都安装不上了,我甚至安装新版GCC重新编译也不行。能试的都试过之后,我决定重新恢复原有的R和R包。怎么做呢?有耐心的可以看看我折腾的过程,没耐心的直接翻到最后就好。
安装PMCMRplus
PMCMR和PMCMRplus是用来做秩和检验的R包,在Linux上安装时,后面那个PMCMRplus包出现了问题。
ERROR: dependency ‘Rmpfr’ is not available for package ‘PMCMRplus’
安装Rmpfr依赖时,出现了如下问题:
configure: error: MPFR Library must be at least version 3.0.0, see README
ERROR: configuration failed for package ‘Rmpfr’
是系统MPFR 版本太低了。MPFR是什么我也不知道,大概是和大数值相关的运算有关,而且和GMP一起常作为GCC安装的依赖。所以重装MPFR,下载地址https://www.mpfr.org/mpfr-current/。如果是root用户,这个问题一下解决了。
sudo apt-get install libmpfr-dev #Ubuntu系列
sudo dnf install mpfr-devel #Centos系列
再重新安装下R包就行了。但是非root安装依赖库很麻烦,只能源码编译安装。
wget https://www.mpfr.org/mpfr-current/mpfr-4.0.2.tar.bz2
tar -jxvf mpfr-4.0.2.tar.bz2
mkdir mpfr4 && cd mpfr-4.0.2
./configure --prefix="/path/software/mpfr4"
没那么容易,报错了:
checking whether gcc __attribute__ ((mode (XX))) works... yes
checking for recent GMP... no
configure: error: GMP 5.0.0 or newer is required
要升级GMP版本,GMP(The GNU Multiple Precision Arithmetic Library)又叫GNU多精度算术库,是一个提供了很多操作高精度的大整数,浮点数的运算的算术库,几乎没有什么精度方面的限制,功能丰富。
于是下载GMP,安装。下载地址:https://gmplib.org/#DOWNLOAD
好像除了6,没有其他版本。
wget https://gmplib.org/download/gmp/gmp-6.1.2.tar.bz2
tar -jxvf gmp-6.1.2.tar.bz2
mkdir gmp6 && cd gmp-6.1.2
./configure --prefix="/path/software/gmp6"
make
make check
make install
GMP6安装成功后,再次安装mpfr,配置时需要指定gmp6路径:
./configure --prefix="/path/software/mpfr4" --with-gmp=/path/software/gmp6
make
make install
再重新安装Rmpfr包,但还是报同样的错。于是将两个库加入环境中:
export LD_LIBRARY_PATH=/path/software/gmp6/lib:/path/software/mpfr4/lib:$LD_LIBRARY_PATH
问题还是存在,莫非要安装新的gcc吗?暂时搁下了,后续再说吧,linux真的好烦,哎~~~
configure: error: MPFR Library must be at least version 3.0.0, see README
ERROR: configuration failed for package ‘Rmpfr’
* removing ‘/ldfssz1/SP_MSI/USER/pengjianxiang/software/R_packages/Rmpfr’
下次装个新的GCC试试吧。
更新
实际上我重新装了一个GCC,将其所有依赖(包括GMP和MPFR)一并安装后也没有安装上Rmpfr包。而Rmpfr的依赖包gmp是可以装上的。

最奇怪的是,我即使是指定MPFR库和GMP库来安装这个R包(包括GCC自动安装的依赖和我之前手动安装的这两个库)也链接不上。
我是怎么指定依赖库的呢?经同事指点,找到了configure.args参数。指定库的头文件和库文件。
#安装gcc时自动安装的依赖库
install.packages("Rmpfr",configure.args = c(Rmpfr = "--with-mpfr-include=/path/to/mpfr-3.1.4/include \\
--with-mpfr-lib=/path/to//mpfr-3.1.4/lib"))
#手动安装的依赖库
install.packages("Rmpfr",configure.args = c(Rmpfr = "--with-mpfr-include=/path/to//mpfr4/include \\
--with-mpfr-lib=/path/to//mpfr4/lib"))
结果还是链接到了原来旧版本的MPFR上。但这个人说他可以https://stackoverflow.com/questions/37287226/pass-configure-arguments-to-install-packages-in-r
,但我的就是连接不上。

同样,下载源码,在终端命令行下安装也报相同的错误。
R CMD INSTALL --configure-args="--with-mpfr-include=/ldfssz1/SP_MSI/USER/pengjianxiang/software/mpfr-3.1.4/include \\
--with-mpfr-lib=/ldfssz1/SP_MSI/USER/pengjianxiang/software/mpfr-3.1.4/lib" Rmpfr_0.7-2.tar.gz
也试了下--configure-vars这个参数:
R CMD INSTALL --configure-vars='INCLUDE_DIR=... LIB_DIR=...'
不行。最后我试着解压Rmpfr源码,直接编译。configure中有--with-mpfr-include和--with-mpfr-lib参数,我指定库路径进行编译准备,可以通过。

但生成的不是Makefile文件,而是src目录下的Makevars等文件。我也不知道能不能这么弄,反正不能make,最后也不能编译。

还有个方法试下,就是用conda了。
第二次更新
这一次用conda来安装试试。关于非root用户安装conda,可以看看这个。
conda create -n meta
source activate meta
conda search r-rmpfr #可事先大小写分别在anaconda上试着搜一下
conda install r-rmpfr
安装成功后,which r-rmpfr找不到。用find命令来找找,试了大小写,最后找到,不知道为什么这么多库路径,也不知该用哪个:
$ find ./ -name '*Rmpfr'
./pkgs/r-rmpfr-0.7_2-r36ha9c3b96_1/lib/R/library/Rmpfr
./pkgs/r-rmpfr-0.7_2-r36ha9c3b96_1/lib/R/library/Rmpfr/R/Rmpfr
./envs/meta/lib/R/library/Rmpfr
./envs/meta/lib/R/library/Rmpfr/R/Rmpfr
最起码Rmpfr在系统上是安装上了,再试着安装下PMCMRplus包吧。接下来就有两种情况了:一是退出虚拟环境进入R,再指定库路径安装;二是仍在虚拟的conda环境中进入R,再进行安装。
首先是第一种情况:
$which R
#R仍然是我用的R3.5.2
$R
R version 3.5.2 (2018-12-20) -- "Eggshell Igloo"
Copyright (C) 2018 The R Foundation for Statistical Computing
Platform: x86_64-pc-linux-gnu (64-bit)
>.libPaths()
[1] "/my/software/R_packages"
[2] "/my/software/conda/miniconda/envs/meta/lib/R/library"
#库路径将conda的也加入了
> install.packages("PMCMRplus")
#然而失败了。
载入Rmpfr包试试:
> library(Rmpfr)
Error in library(Rmpfr) : there is no package called ‘Rmpfr’
> library(Rmpfr,lib="/my/software/conda/minicondaLoading required package: gmp
Attaching package: ‘gmp’
The following objects are masked from ‘package:base’:
%*%, apply, crossprod, matrix, tcrossprod
Error: package or namespace load failed for ‘Rmpfr’ in rbind(info, getNamespaceInfo(env, "S3methods")):
number of columns of matrices must match (see arg 2)
In addition: Warning message:
package ‘Rmpfr’ was built under R version 3.6.1
可知虽然Rmpfr已安装,但conda是用R3.6.1安装的,而我的R版本是3.5.2,因此在我的R上不能作为依赖来安装PMCMRplus。
再看看第二种情况:
$ R
R version 3.6.1 (2019-07-05) -- "Action of the Toes"
Copyright (C) 2019 The R Foundation for Statistical Computing
Platform: x86_64-conda_cos6-linux-gnu (64-bit)
R is free software and comes with ABSOLUTELY NO WARRANTY.
You are welcome to redistribute it under certain conditions.
Type 'license()' or 'licence()' for distribution details.
Natural language support but running in an English locale
R is a collaborative project with many contributors.
Type 'contributors()' for more information and
'citation()' on how to cite R or R packages in publications.
Type 'demo()' for some demos, 'help()' for on-line help, or
'help.start()' for an HTML browser interface to help.
Type 'q()' to quit R.
> .libPaths()
[1] "/ldfssz1/SP_MSI/USER/pengjianxiang/software/R_packages"
[2] "/ldfssz1/SP_MSI/USER/pengjianxiang/software/conda/miniconda/envs/meta/lib/R/library"
> install.packages("PMCMRplus")
#等了半天,比一般安装要慢很多。
conda是用R3.6.1安装的Rmpfr,库路径也是两个。晚上睡觉去了,放在后台龟速安装,不知为何,最后没装成功。
那么不进入虚拟环境,用conda安装的R直接安装这个包会如何呢?
$ /my/software/conda/miniconda/envs/meta/bin/R
> library(Rmpfr) #success
> .libPaths()
[1] "/my/software/R_packages"
[2] "/my/software/conda/miniconda/envs/meta/lib/R/library"
> library(PMCMRplus)
Error in library(PMCMRplus) : there is no package called ‘PMCMRplus’
> install.packages("PMCMRplus") #fail
> install.packages("PMCMRplus",lib="/my/software/conda/miniconda/envs/meta/lib/R/library")
make: *** [crwrapf90.o] Error 127
ERROR: compilation failed for package ‘PMCMRplus’
竟然还是失败的!若要解决,除非都用conda来安装R及其R包,工作量巨大。【补充:其实这个我后面也试过了,conda安装的R,根本运行不起来】
第三次更新
WF慈悲!果然成功地污染了之前的R环境,加载一些包的时候已经报错了。不得不重新安装。
> library(WGCNA)
Loading required package: dynamicTreeCut
Loading required package: fastcluster
Attaching package: ‘fastcluster’
The following object is masked from ‘package:stats’:
hclust
Error: package or namespace load failed for ‘WGCNA’ in rbind(info, getNamespaceInfo(env, "S3methods")):
number of columns of matrices must match (see arg 2)
然而即便是注释掉conda的环境变量,从头安装如WGCNA等包,也还是报错:
Error in rbind(info, getNamespaceInfo(env, "S3methods")) :
number of columns of matrices must match (see arg 2)
ERROR: lazy loading failed for package ‘WGCNA’
于是手动将之前安装的WGCNA全删掉,再重新安装。还是不行!把所有的包全都更新了一遍,发现有很多包已经被破坏,装不上了。
解决方法
我决定重新装一个R!我想这个我有经验,应该没问题,就是麻烦了点。事实再次证明了图样图森破,无论我如何折腾都装不上了。包括用之前的gcc及其编译的依赖库,还是我新安装gcc来重新编译,反正就是报各种各样的缺函数库的错。期间我也重新安装了Anaconda来解决,无济于事。最后我决定恢复原有的R及其R包!
我之前的R已经编译完装好,应该不会有问题。根据报错提示,我先看看具体哪些包有哪些问题,但这样不能穷尽,很麻烦。加载或重新下载不成功的R包几乎都有这么一条错误:
Error in rbind(info, getNamespaceInfo(env, "S3methods"))
我们安装软件包时,都会创建一个名为 .__ NAMESPACE__ 的隐藏环境 。它包含许多对象,报这个错误预示着其中一个被称为 S3methods的文件已损坏。这些应该都是R库文件,那么我能不能建立全新的一个R包库来解决呢?事实证明竟然是可以的!于是我将环境变量的R库路径注释掉,重新建立了一个新的库路径,将所有R包转移到这一个路径上来。麻是麻烦了点,但总比我各种尝试导致崩溃要强点。
#export R_LIBS=/my/before/path/R_packages
这里要感谢这个回答给了我提示。否则我永远也不知道下一个正确的解决方法是什么。血的代价告诉自己,再也不轻易破坏环境了。
Ref:https://blog.csdn.net/u013310119/article/details/81081125
https://www.jianshu.com/p/bc909ce2e424
install-gcc-5.4-without-root
[Linux]非root的R环境被conda破坏后如何恢复?的更多相关文章
- linux环境变量设置错误后的恢复方法(转)
原文: http://blog.csdn.net/hoholook/article/details/2793447 linux环境变量设置错误后的恢复方法 中国自学编程网收集整理 发布日期:2008 ...
- linux非root用户下安装软件,搭建生产环境
之前的用实验室的服务器,因为某些原因,使用的用户没有root权限.linux的非root用户很多软件无法安装,非常的不方便.我的方法是使用brew来代替系统的包管理工具.brew是最先用在mac上的包 ...
- 【tf.keras】Linux 非 root 用户安装 CUDA 和 cuDNN
TensorFlow 2.0 for Linux 使用时报错:(cuDNN 版本低了) E tensorflow/stream_executor/cuda/cuda_dnn.cc:319] Loade ...
- [Linux] 非root安装GCC9.1.0
说明 一般Linux系统自带或公共的GCC版本都很低,如目前我们的服务器版本的GCC还停留在gcc-4.9.3,而官网已到达9.2版本(下载http://ftp.gnu.org/gnu/gcc/) , ...
- linux非root用户执行开机启动程序
问题 开机启动其他用户的程序或者说非root用户执行开机启动 编写开机启动脚本 编写开机启动脚本apple_tree,放到/etc/init.d,系统启动时会自动执行. 例如,/etc/init.d/ ...
- linux非root用户安装jdk1.8
如题,先到 Oracle 官方网站 下载1.8版本的 JDK 压缩包(jdk-8u221-linux-x64.tar.gz)到本地(如D盘的soft目录),然后开始进入linux的非root用户(如w ...
- Linux非root安装Python3以及解决SSL问题
说明 接上一篇. [Linux]非root安装Python3及其包管理 上一篇虽然成功安装了Python3及一些常用的模块,但因为一直装不上SSL模块,导致一些包无法安装,尝试了不少方法都失败了(网上 ...
- Linux非root用户安装jdk和tomcat
转载自:http://blog.csdn.net/wuyigong111/article/details/17410661,进行部分修改 创建一个用户 sgmm,并在其用户目录里面安装 jdk和tom ...
- Linux非root用户程序使用小于1024端口
在Linux下,默认端口1024下的是要在root下才能使用的,在其他用户下,如果尝试使用将会报错.在有的时候,我们可能考虑程序运行在root帐户下,可能会给Linux系统带来安全风险.那如何能够让非 ...
随机推荐
- Canal Server发送binlog消息到Kafka消息队列中
Canal Server发送binlog消息到Kafka消息队列中 一.背景 二.需要修改的地方 1.canal.properties 配置文件修改 1.修改canal.serverMode的值 2. ...
- 替换excel模板中的内容并使用JavaMail发送邮件
由于在公司工作,常年出差,每天都要以日报的形式向公司汇报当天的工作内容.而日报的内容大体上就只有当天工作的主要内容时变化的,其余的都是不变 的. 而我的电脑刚打开excel有点卡,因此决定使用Java ...
- 2021.8.16考试总结[NOIP模拟41]
T1 你相信引力吗 肯定是单调栈维护.但存在重复值,还是个环,不好搞. 发现取区间时不会越过最大值,因此以最大值为断点将环断为序列.在栈里维护当前栈中有多少个与当前元素相等的元素,小分类讨论一下. 最 ...
- UVA-1016 Silly Sort
UVA-1016 题目大意:给定一个长度为n的序列,每次操作可以交换任意两个数的位置,代价为两个数的和,求最小代价,将序列排成有序的. 首先,显然需要交换的数一定会形成环: 那么对于每一个环,我们有两 ...
- TensorFlow从入门到入坑(2)
TensorFlow学习(2) 一.jupyter notebook的安装和使用 1. 什么是jupyter notebook jupyter notebook(http://jupyter.org/ ...
- java实现rsa加密算法【5min快速应用教程】
该篇文章的主要目的是让读者能够迅速应用到项目中,想要了解详细的rsa加密算法的,可以百度找到更多原理.深度分析的文章. RSA算法是一种非对称密码算法,所谓非对称,就是指该算法需要一对密钥,使用其中一 ...
- Linux网卡bond模式
Bond模式 交换机配置 mode=0 balance-rr 轮询均衡模式 LACP mode on 强制链路聚合 mode=1 active-backup 主备模式 无 mode=2 balance ...
- 2万字|30张图带你领略glibc内存管理精髓(因为OOM导致了上千万损失)
前言 大家好,我是雨乐. 5年前,在上家公司的时候,因为进程OOM造成了上千万的损失,当时用了一个月的时间来分析glibc源码,最终将问题彻底解决. 最近在逛知乎的时候,发现不少人有对malloc/f ...
- dart系列之:dart语言中的变量
目录 简介 dart中的变量 定义变量 变量的默认值 Late变量 常量 总结 简介 flutter是google在2015年dart开发者峰会上推出的一种开源的移动UI构建框架,使用flutter可 ...
- Qt概要
Qt是面向对象的框架,使用特殊的代码生成扩展以及一些宏.是一个跨平台的C++图形用户界面.它是一款可以轻松的帮我们做界面的软件. Qt是1991年奇趣科技公司(2008 年 6 月被诺基亚收购)开发的 ...