Linux服务器登录、环境配置和使用（个人总结版_纯小白版）

分类：Ubuntu作者：SDsqx6

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档

文章目录

前言

提示：这里可以添加本文要记录的大概内容：

学习要用到深度学习，跑代码和数据集的工作量很大，有幸得到实验室分配的服务器使用机会，从一个完全小白的角度总结一下服务器的使用。

提示：以下是本篇文章参考的文献
1、https://blog.csdn.net/zxxxiazai/article/details/102780990
2、https://blog.csdn.net/weixin_45766759/article/details/114677710

一、服务器是什么

就我自己的理解而言，服务器也是一个计算机但配置的功能更为强大，所以它操作系统也有以Linux为内核的系统（最常用：因为维护成本低）和Windows系统等，通常服务器用的都是以Linux为内核的开源系统的Ubuntu(乌邦图)。

二、服务器如何使用

1、安装配套软件

在这直接列出需要用到的一套软件
提示：不止有这些，可以尝试其它的，以下为windows系统可以使用的软件
①Xshell(ge控制服务器，写操作命令)
②Xftp（向服务器传输文件）

以上两个软件的安装：
1、直接百度Xshell,进入官网
2、选择校园/家庭免费专栏
填写邮箱后->勾选两者->查看邮件->点击邮件内的两个链接，分别下载，自定义安装即可，没有需要注意的点

③EasyConnect（挂某个局域网的vpn,比如校园网）

直接在学校官网找到下载的位置，安装好后，使用用户名和密码登陆即可，登陆后自动挂到学校局域网

2.服务器登陆

第一步，新建会话

打开Xshell,点击左上角文件，选择新建

在这里插入图片描述

名称自己随意起一个，协议默认SSH，端口号默认22

第二步，填IP

主机处填写服务器IP，这里有两种填写方式
第一种：这个地方直接填写服务器公网IP
第二种：先挂学校VPN，这个地方填写服务器局域网IP

这里要注意你拿到的服务器IP是公网IP和局域网内的IP

如何分辨

在这里插入图片描述

其它分辨方法请自行百度

填写完后点击左侧用户身份验证

第三步，填写用户名和密码

在这里插入图片描述


这个界面填写拿到的用户名和密码，点击确定即可

第四步、连接会话

新建完成后，会在会话管理处出现刚才创建的会话
双击该会话之后，会自动连接到服务器，出现以下结果即为成功登陆

在这里插入图片描述

3、服务器操作指令

服务器因为不是可视化界面，需要通过指令进行操作比如新建文件、删除文件等，在此列出一些常用的指令
1、文件操作

cd 文件名  #打开文件（cd .. 返回）
ls #列出目前目录文件下所含的子文件
mkdir 文件名  #新建一个文件
rm    文件名  #删除一个文件（rm -rf 子目录下也全部删掉）

2、查看服务器属性操作

nvidia-smi #查看Driver Version:和CUDA Version
nvidia-smi -L  #查看服务器显卡型号

4、环境配置

（一）安装Anaconda

Anaconda理解

Anaconda是一个开源的Python发行版本，包含了包括Python、Conda、科学计算库等180多个科学包及其依赖项。因此，安装了Anaconda就不用再单独安装Python。

第一步、创建文件夹

使用的是空服务器，为了后续其他人使用方便，先创建一个home文件夹，在此文件夹下创建单个用户文件夹如user1,在user1下创建workspace文件夹，用以配置环境。

第二步、下载

方式一：
用自己的电脑下载对应版本的安装包（.sh结尾，Linux），一般选最新的即可。
然后打开自己电脑的cmd窗口，用scp命令将安装包拷贝到远程服务器，然后根据提示输入密码即可。

cd ~/文件路径
scp Anaconda3-2019.10-Linux-x86_64.sh username@远程服务器IP:/home/username

方式二：
使用服务器下载安装包并安装
登陆服务器，打开workspace文件，使用**wget**指令直接将anaconda安装包下载到远程服务器：

1.下载安装包

cd /home/username
wget https://repo.anaconda.com/archive/Anaconda3-2023.03-Linux-x86_64.sh

此处，最后为anaconda的版本号，替换即可，推荐使用清华源下载，嘎嘎快
https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/Anaconda3-2023.03-Linux-x86_64.sh

清华镜像网站Anaconda下载网址：https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/?C=M&O=D

error

如果出现与清华源网站出现连接错误的问题：

ubuntu:~$ wget https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/Anaconda3-2023.03-Linux-x86_64.sh
--2024-01-04 07:03:29--  https://mirrors.tuna.tsinghua.edu.cn/anaconda/archive/Anaconda3-2023.03-Linux-x86_64.sh
Resolving mirrors.tuna.tsinghua.edu.cn (mirrors.tuna.tsinghua.edu.cn)... 101.6.15.130,2402:f000:1:400::2
Connecting to mirrors.tuna.tsinghua.edu.cn (mirrors.tuna.tsinghua.edu.cn)|101.6.15.130|:443... connected.
HTTP request sent,awaiting response... 403 Forbidden
2024-01-04 07:03:29 ERROR 403: Forbidden.

解决方法：wget –user-agent=“Mozilla”+安装包链接

2.安装

在当前文件目录中输入：

bash Anaconda3-2023.03-Linux-x86_64.sh

按Enter,继续按加等一会

在这里插入图片描述


输入yes接受许可条款

在这里插入图片描述


输入yes,自动添加环境变量

3.查看是否安装成功
重新连接服务器，输入指令python，可见python版本为anaconda中的python版本

在这里插入图片描述


error

@ubuntu:~$ conda list
conda: command not found

解决方法：将anaconda添加到环境路径中

echo 'export PATH="~/anaconda3/bin:$PATH"' >> ~/.bashrc
source ~/.bashrc
第三步、Conda常用指令
conda list  # 查看这个环境下安装的包和版本
conda install numpy scikit-learn  # 安装numpy sklearn包
conda env list  # 查看所有的环境
替换镜像源（可选）

为了加快下载速度，通常不从官网下，而从国内的镜像源下载，以清华源为例
添加

conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/cloud/pytorch/
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main/

直接复制到服务器base环境下即可

验证

conda config --set show_channel_urls yes | cat ~/.condarc

显示如下结果则证明添加成功

在这里插入图片描述


使用
在采用指令下载时，注意去掉后缀，比如-c pytorch
删除

# 删除已添加的源
conda config --remove-key channels

（二）创建环境并配置

第一步、创建新环境
为什么要创建新环境

可以理解为Anaconda为一个大的商场，需要针对不同Projec的要求创建不同的环境来去提供一个个商店（项目）完成具体的任务的平台，Github上的开源项目Readme部分会具体提出项目环境Requirements
示例

在这里插入图片描述

创建
conda create -n 环境名称 python=xxx(python版本)
查看已有的环境
conda env list   #查看已有的环境
删除环境
conda env remove -n name
激活环境
conda activate 环境名称

此时，进入新环境后，可以进行创建文件夹、安装pytorch等

conda deactivate  #返回base环境
第二步、在新环境中配置pytorch等
①概念理解
  • Pytorch:一个框架，具有强大的GPU加速的张量计算，包含自动求导系统的深度神经网络，所以在深度学习的时候用PyTorch会比较快。
  • CUDA：在进行深度学习的时候，需要用到GPU，CUDA就是一个调用GPU的工具。只有NVidia显卡才能使用CUDA。现有的主流深度学习框架基本都是基于CUDA进行GPU加速的。
  • CUDA Toolkit：CUDA运行版本，能够使得使用GPU进行通用计算变得简单和优雅。
  • cuDNN：CUDA看作是一个工作台，上面配有很多工具，如锤子、螺丝刀等。cuDNN是基于CUDA的深度学习GPU加速库，有了它才能在GPU上完成深度学习的计算。它就相当于工作的工具，比如它就是个扳手。但是CUDA这个工作台买来的时候，并没有送扳手。想要在CUDA上运行深度神经网络，就要安装cuDNN，就像你想要拧个螺帽就要把扳手买回来。这样才能使GPU进行深度神经网络的工作。
②查看服务器信息

查看服务器CUDA驱动版本
在任一环境的起始界面输入以下命令

nvidia-smi

在这里插入图片描述

我的驱动版本是525.89，其能兼容的最高CUDA版本也贴心地写在一旁：12.0

在这里插入图片描述

查看服务器型号及其对应的算力
型号查询

nvidia-smi -L  #得到服务器型号

在这里插入图片描述

我的型号为RTX 3090

算力查询
通过如下链接可以查询到NVIDIA显卡对应的算力，如果你的GPU型号不在表中，可能GPU太老，或者算力太低。

https://link.csdn.net/target=https%3A%2F%2Fdeveloper.nvidia.com%2Fcu
da-gpus%23collapseOne

算力对应表

在这里插入图片描述

可以看到GTX 3090对应的算力是8.6
3090显卡一般使用CUDA11+，而直接pip安装的pytorch可能是cuda10.2版本的，所以只依靠升级pytorch版本是不行的，还需要安装对应cuda版本的pytorch。

③安装GPU版本的pytorch和cunda
a、CUDA版本的确定

根据GPU驱动版本确定CUDA Toolkit版本,从以下链接可以查看
https://docs.nvidia.com/cuda/cuda-toolkit-release-notes/index.html

注意：驱动版本对CUDAToolkit向下兼容的，具体对应关系可以百度一下
此处的CUDA指的就是运行版本CUDA Toolkit

示例

在这里插入图片描述

b、Pytorch版本的确定

根据开源项目Requirements确定即可，不同的Pytorch运行的模型准确度会有差异，尽量保持一致。

c、确定下载命令

以pytorch 1.10.0和CUDA 11.3为例

可以打开Pytorch首页，往下滑，看到

在这里插入图片描述

通过前五行的组合，最后一行会自动得到安装命令，会同时安装pytorch、torchvision、CudaToolkit

conda

conda install pytorch==1.10.0 torchvision==0.11.0 torchaudio==0.10.0 cudatoolkit=11.3 -c pytorch -c conda-forge

pip

pip3 install torch==1.13.0+cu116 torchvision==0.14.0+cu116 torchaudio==0.13.0+cu116 -f https://download.pytorch.org/whl/cu116/torch_stable.html

第二种方式快一点，注意后面的链接不能省略，不然会出现找不到版本的错误
通过以上指令会把Pytorch1.10以及需要的CUDA11.3全部安装好（不需要单独安装CUDA）。安装完成后，进入python环境，检查CUDA是否可用，调用torch.cuda.is_available()返回True说明CUDA环境可用。

④出现的问题及应对方法

问题
当使用比较新的显卡（比如NVIDIA GeForce RTX 3090）时，由于显卡的架构比较新，可能旧版本的pytorch库没有支持到。这时候就会出现capability sm_86 is not compatible的问题，同时根据输出可以看到 The current PyTorch install supports CUDA capabilities sm_37 sm_50 sm_60 sm_70 sm_75当前pytorch只能支持上面几种架构。

解决方法
安装高版本的cuda和pytorch，多半是cuda版本较低，使用操作指令直接在workspace文件夹下安装，会自动覆盖之前的版本，不需要提前卸载之前的版本。

3、在服务器的某个环境中运行程序

（一）创建代码文件夹

mkdir  Code   #在环境下创建存放运行代码的文件夹

（二）使用Xftp传输文件

目录打开至上一步存放代码的文件夹处，将本地.py格式文件传输过来
（三）安装用到的Python—Packages
使用pip install 就可以
（四）运行代码
打开至存放代码的文件夹处

python  code名称.py

放一下我用服务器GPU训练的结果

在这里插入图片描述

总结

以上是我目前使用服务器运行python程序的学习经验，目前仅涉及到了自己python代码的CPU和GPU运行，还没有真正完成深度学习用到的环境配置，以及大体量数据集下载到服务器的部分，争取尽快更新出来。

原文地址：https://blog.csdn.net/SDsqx6/article/details/130058821

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容， 请发送邮件至 dio@foxmail.com 举报，一经查实，本站将立刻删除。

相关推荐

预编译 CARLA 安装过程记录 Ubuntu 22.04 Carla 0.9.14
文章浏览阅读2.3k次，点赞4次，收藏22次。最近安装了CARLA预编译版，总体过程感觉还是挺简单的，但是由于在网上找的参考资料并没有和自己遇到的情况完全一样的，所以把自己的安装过程记录下来，方便和自己一样的后来人进行安装，同时也自己作个记录留作备忘。其实预编译版的CARLA本身几乎不用什么命令行进行安装，主要步骤只有解压缩和拷贝文件，和极少的命令行安装操作。但是相关依赖以及其它的CARLA所使用的一些工具需要一起安装好，下面一起来看看安装步骤吧。_ubuntu22.04安装carla
Ubuntu 20 安装包下载（清华镜像）
文章浏览阅读6.3k次，点赞5次，收藏15次。在清华镜像中下载Ubuntu 20 安装包_ubuntu20下载
error: command '/usr/bin/gcc' failed with exit code 1 问题解决
文章浏览阅读5k次。linux环境， python3.7.问题描述： 安装rally， pip3 install -r requirements.txt 时提示如下： 说明openssl 已安装。解决：1. pip3 install --upgrade pip ， 结果输出如下 ..._error: command '/usr/bin/gcc' failed with exit code 1
详细攻略 WIN11 + WSL2+ Ubuntu22.04+CUDA + MINICONDA3+Pytorch安装踩坑总结，手把手教学，看不会你打我
文章浏览阅读1.1k次。自己刚踩坑装好的W11 WSL2 miniconda_wsl2 cuda
Ubuntu 20.04 安装VNC Server的简单教程
文章浏览阅读4.2k次，点赞4次，收藏17次。要安装这个 standalone的，会有一点区别（不识别 下面的 -localhost no)上面的命令会在~/.vnc/目录下生成一个 passwd文件。具体端口号，可以查看vncserver -list返回结果中的RFB PROT。作用是vncserver启动的时候运行这些命令，把桌面程序启动起来。如果希望用某个用户比如 demo登录，就用su切换到这个用户。桌面版默认就已安装，服务器版需要手动安装，并启动。关闭某个会话可以用下面的命令。远程地址输入ip:port。查看全部的vnc会话。_ubuntu vncserver
Ubuntu本地安装code-server结合内网穿透实现安卓平板远程写代码
文章浏览阅读894次，点赞51次，收藏31次。在安卓使用vscode主要是连接一个远程的code-server服务，code-server服务安装在什么系统,调用的就是什么系统的环境,如这里使用ubuntu进行安装code-server,那使用的就是ubuntu环境,如需要go,python,java开发,需要在Ubuntu安装相关环境,创建的文件夹和项目也是在Ubuntu里面.这种方式其实在访问vscode的时候利于可以随时随地进行连接使用,且不受设备影响。
安装terminator(ubuntu上超好用的终端)
安装Ubuntu上超好用的终端Terminator。通过添加软件源、更新源、安装Terminator等步骤完成。
【不单调的代码】还在嫌弃Ubuntu终端？快来试试做些Ubuntu终端的花式玩法。
文章浏览阅读1.1k次，点赞83次，收藏74次。不要嫌弃Ubuntu的单调的终端界面啦，快来试试这些有意思的命令_ubuntu系统有趣的玩法
Ubuntu 20.04设置虚拟内存 （交换内存swap）解决内存不足
文章浏览阅读2.5k次。在ubuntu系统中，swap空间就是虚拟内存，所以考虑在磁盘空间富余的目录下设置虚拟内存swap文件，用来缓解内存不足的问题。通过上面的信息可以看到，/dev/vda2 目录下还剩余45G，那么就可以把swap文件生成在/dev/vda2目录下。在系统监控中发现，当数据库服务程序启动后，占用了大量内存空间，导致系统的剩余的内存往往只有几十MB。# bs 为块的大小，count 创建多少个块。# 执行命令后，删除创建的swap目录即可。#把生成的文件转换成 Swap 文件。2、创建一个swap文件。_ubuntu20修改swap大小
RV1126 SDK编译错误及解决记录
文章浏览阅读2.9k次，点赞2次，收藏10次。记录RV1126的SDK编译错误，以及解决处理_command exited with non-zero status 1
【记录】ubuntu20.04安装nvidia显卡驱动
文章浏览阅读1.1w次，点赞22次，收藏101次。【记录】ubuntu20.04安装nvidia显卡驱动_ubuntu20.04安装nvidia显卡驱动
【嵌入式Linux开发】Ubuntu22.04切换Linux内核，启用nfs2，解决uboot无法通过nfs服务从Ubuntu下载系统镜像（TTTTTT）
文章浏览阅读727次，点赞6次，收藏27次。在嵌入式Linux开发过程中，可能遇到uboot无法通过nfs服务从Ubuntu下载系统镜像（TTTTTT）的问题。如果你使用的是较新版本的Ubuntu，那么其**默认内核将不支持nfs2**！而**uboot仅支持到nfs2**，因此我们需要修改系统内核以及nfs配置文件，开启nfs2服务。**此问题非常棘手**，因为问题出现的时间太近，并且使用的人少。由于是2023年后才出现的问题，**chatgpt也无法解答**！本文参考网络上多篇博客资料，是解决此问题的最新办法。
ubuntu下安装软件的方法
ubuntu系统下安装软件的方法有多种，包括使用apt工具、deb软件包安装、源码编译安装以及通过软件中心安装。还有一种以 .run 后缀的软件包也可以在ubuntu系统下安装。具体的安装方法可以通过百度搜索来获取。
XUbuntu22.04之安装pkg-config(一百九十二)
文章浏览阅读814次。本篇目的：Xubuntu如何安装pkg-configpkg-config是一个计算机软件包，用于帮助开发人员查找、定位和使用依赖库。它通常用于构建软件时，开发人员需要指定程序所依赖的外部库的位置和版本信息。使用pkg-config，开发人员可以很容易地查找、检索和导出这些依赖库的信息，从而简化了软件的构建过程。_ubuntu中怎么下载pkg-config
ubuntu实现共享文件夹（20.04）
文章浏览阅读2k次。ubuntu创建共享文件夹_ubuntu20.04共享文件夹
【无公网IP】在公网环境下Windows远程桌面Ubuntu 18.04
文章浏览阅读2.9k次，点赞74次，收藏73次。对于有长期远程桌面需求的用户，建议将cpolar套餐升级到专业套餐，支持配置固定的公网TCP端口，且带宽也会相应的增大，支持更高效便捷的远程桌面连接Ubuntu系统。【cpolar内网穿透支持http/https/tcp协议，支持永久免费使用，不限制流量，无需公网IP，也不用进入路由器设置，操作简单。隧道创建成功后，点击左侧仪表盘的状态——在线隧道列表，查看xrdp隧道的所生成的公网TCP端口地址，复制下来。，使用cpolar内网穿透映射3389端口，生成公网TCP端口地址，实现在公网环境下，_ubuntu 局域网桌面
Ubuntu 创建用户
文章浏览阅读3.2k次。而在linux的ubuntu版本中，又多出两类用户：安装ubuntu系统的源用户xxx，其与root具有相同权限，仅在执行命令时，前面加sudo。在ubuntu中，用命令deluser username可以直接删除用户账号及家目录，而用centos7中的命令userdel -r username才能达到同样目的。在ubuntu中，没有moduser命令，centos7中的usermod修改用户信息的命令，同样可以用在ubuntu中。在系统中，创建新的用户或称为账号，一般需要多步操作。_ubuntu创建一个新用户
Ubuntu查看系统日志的几种方法
文章浏览阅读1.6w次，点赞4次，收藏23次。系统的许多日志文件都存储在 /var/log 目录中。你可以使用 ls /var/log 命令来列出可用的日志文件。/var/log/Xorg.0.log：包含 X 服务器的日志信息（图形界面）。打开DASH，搜索日志或者log，打开app，这个是/var/log的界面版。这将显示系统日志的末尾，并提供有关系统崩溃和错误的信息。/var/log/kern.log：包含内核日志信息。/var/log/dmesg：包含开机时的日志信息。/var/log/syslog：包含系统日志信息。_ubuntu查看系统日志
Ubuntu apt更换国内镜像源，apt 更新源，apt 国内镜像
文章浏览阅读857次。首先将source.list复制为source.list.bak备份，然后将source.list内容改为需要的镜像源列表即可。Ubuntu采用apt作为软件安装工具，其镜像源列表记录在/etc/apt/source.list文件中。本节均为 Ubuntu 20.04 的镜像源列表。若为其他版本，将所有focal更改为其他版本代号即可。_apt 国内源
Ubuntu软件源、pip源大全，国内网站网址，阿里云、网易163、搜狐、华为、清华、北大、中科大、上交、山大、吉大、哈工大、兰大、北理、浙大
文章浏览阅读3.2k次。软件源、pip源_ubuntu国内源地址
pythonJavaScriptjavaHTMLPHPreactjsC#AndroidCSSNode.jssqlrpython-3.xMysqLjQueryc++pandasFlutterangularIOSdjangolinuxswifttypescript路由器JSON路由器设置无线路由器h3c华三华三路由器设置华三路由器电脑软件教程arraysdocker软件图文教程Cvue.jslaravelspring-boot