试过环境变量法，在我的终端没办法打开R的时候无解（报QT错，暂时不想去解决；现在发现这个错误自己好了（为什么？））；在中文互联网上提问基本得到的也都是对Rstudio-server如何关联R的解决办法（拜托，Rstudio和Rstudio-server到底还是两种东西……有些人在写回答的时候到底能不能先看看自己的标题写的是个什么东西？）
然后终于找到了软链接法，我的4.0版本R安装在conda环境里，所以创建一个软链接替换掉/usr/local/bin中的R：
1 sudo ln -sf /home/usr/anaconda3/envs/r4-base/bin/R /usr/local/bin
然后打开Rstudio迎接的就是熟悉的4.0版本R了，之前老版本的R目前一般也用不到，直接替换掉也没问题。