热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

如何用GPU服务器运行Python

如何用GPU服务器运行Python-目录前言一、服务器登录1.1下载安装putty1.2putty远程登录 1.3查看GPU、显卡常用命令1.4Linux常用命令二、

目录


前言


一、服务器登录


1.1 下载安装putty


1.2 putty远程登录 


1.3 查看GPU、显卡常用命令


1.4 Linux常用命令


二、Anaconda创建虚拟环境并安装pytorch


2.1 安装Anaconda


2.2 安装Pytorch


三、使用FileZilla拷贝文件至服务器


3.1 下载安装FileZilla


3.2 使用FileZilla传输文件 


四、运行JupyterNotebook


4.1 启动JupyterNotebook 


4.2 切换虚拟环境 


五、运行py文件


5.1 激活虚拟环境


5.2 运行py文件




前言

众所周知,使用本地电脑的CPU跑深度学习代码非常慢,而GPU内在架构做矩阵运算和深度学习的神经网络有着先天的优势,近期本人找到一台安装linux系统的GPU服务器,现将使用过程中摸索的经验分享给大家。


一、服务器登录

1.1 下载安装putty


首先我们要下载putty等软件进行登录服务器


下载连接:https://pan.baidu.com/s/1LZ5jl6Sk3-A3lmnDEdZmVA 
提取码:xuof



1.2 putty远程登录 


双击之后出现如下界面,然后输入服务器的地址(端口号选22),然后点击open进入登录界面 



进入服务器linux操作界面,如下图,输入密码(输入的具体内容不显示,输入完点击Enter即可)



查看显卡详情命令:nvidia-smi


从上图可以看到我们GPU的基本配置,内存为24G,当前有1.5G左右在运行pyton代码


1.3 查看GPU、显卡常用命令


可参考下方博文


查看gpu、显卡常用命令_heituzii的博客-CSDN博客


1.4 Linux常用命令


可参考下方博文


Linux常用命令大全(非常全!!!)_木头大左的博客-CSDN博客_linux常用命令


二、Anaconda创建虚拟环境并安装pytorch

2.1 安装Anaconda


通过下方连接选择需要的Anaconda版本



https://repo.anaconda.com/archive/



然后输入



wget+下载链接 



若成功会出现如下界面



具体过程可以参考下方博客 


如何在Linux服务器上安装Anaconda(超详细)_あなたを待って-CSDN博客_服务器安装anaconda


2.2 安装Pytorch


首先进入Anaconda安装目录


输入ls查看目录列表



ls 



输入cd+文件夹名,进入指定目录,我在自己本地操作目录如下



cd anaconda3/envs/



创建一个叫做 'dir1' 的目录' 



mkdir dir1



激活创建的虚拟环境



source activate dir1 



安装pytorch,进入pytorch官网, 如下链接


Start Locally | PyTorch


选择自己需要的版本,并获取相关命令 



nvidia-smi查看当前GPU版本,可以看到我使用的GPU版本是11.2安装11.3版本最契合



conda install pytorch torchvision torchaudio cudatoolkit=11.3 -c pytorch


然后我们需要什么package就在已激活的Anaconda虚拟环境envs中pip安装即可


putty软件可同时登录多个窗口,我们可以在一个窗口中运行代码,过程中报错什么package没有安装,在另一个窗口中进行虚拟环境安装相应的package即可


关闭虚拟环境



conda deactivate dir1



三、使用FileZilla拷贝文件至服务器

3.1 下载安装FileZilla


链接:https://pan.baidu.com/s/1lsoALuEKZkej58ov6bbL2Q 
提取码:31yg 


3.2 使用FileZilla传输文件 


安装好FileZilla之后将下载好的文件拷贝到服务器指定目录 ,具体操作步骤比较简单,可参照这篇博文FileZilla使用ssh连接linux_破阵的专栏-CSDN博客_filezilla ssh链接 


四、运行JupyterNotebook

4.1 启动JupyterNotebook 


通过cd命令,进入自己的文件夹(先创建自己的工作文件夹),然后输入



jupyter lab 



前面加上nohub可以保证在与服务器断开连接的情况下任然运行代码,当代码结果处理是,或者运行过程中可以去output.out文件中查看日志,此过程中服务器计算资源保持占用,结束之后输入 Kernel——Restart Kernel..解除占用,或者通过鼠标箭头移动到代码上,右键Clear Outputs



输入上述命令,可以生成相应的password和一个端口号,JupyterNotebook, 


在本地电脑打开任意浏览器,输入http://(服务器IP):(生成的端口号)/


进如JupyterNotebook,然后输入相应的password即可完成登录


4.2 切换虚拟环境 


选择Kernel——Change Kernel..可以选择自己搭建的环境,或者切换环境,然后在此环境下运行.pynb文件



五、运行py文件

5.1 激活虚拟环境



source activate+虚拟环境名称 



5.2 运行py文件


在自己想要使用的虚拟环境激活的情况下,cd命令访问py文件所在目录,然后输入命令



python+文件名.py



以上就是我当前使用GPU服务器的经验,分享给大家,希望可以有所帮助。 




推荐阅读
  • 如何更换Anaconda和pip的国内镜像源
    本文详细介绍了如何通过国内多个知名镜像站(如北京外国语大学、中国科学技术大学、阿里巴巴等)更换Anaconda和pip的源,以提高软件包的下载速度和安装效率。 ... [详细]
  • 解决PyCharm中安装PyTorch深度学习d2l包的问题
    本文详细介绍了如何在PyCharm中成功安装用于PyTorch深度学习的d2l包,包括环境配置、安装步骤及常见问题的解决方案。 ... [详细]
  • 新手指南:在Windows 10上搭建深度学习与PyTorch开发环境
    本文详细记录了一名新手在Windows 10操作系统上搭建深度学习环境的过程,包括安装必要的软件和配置环境变量等步骤,旨在帮助同样初入该领域的读者避免常见的错误。 ... [详细]
  • 在Win10上利用VS2015构建Caffe2环境
    本文详细介绍如何在Windows 10操作系统上通过Visual Studio 2015编译Caffe2深度学习框架的过程。包括必要的软件安装、环境配置以及常见问题的解决方法。 ... [详细]
  • 多版本CUDA共存与即时切换方案
    本文探讨了在同一台机器上安装并管理多个CUDA版本的方法,以适应不同软件或项目的需求。特别是在使用旧版PyTorch等依赖特定CUDA版本的软件时,该方法尤为实用。 ... [详细]
  • 本文详细介绍了如何在BackTrack 5中配置和启动SSH服务,确保其正常运行,并通过Windows系统成功连接。涵盖了必要的密钥生成步骤及常见问题解决方法。 ... [详细]
  • 本文介绍了在安装或运行 Python 项目时遇到的 'ModuleNotFoundError: No module named setuptools_rust' 错误,并提供了解决方案。 ... [详细]
  • 本文详细介绍了 Dockerfile 的编写方法及其在网络配置中的应用,涵盖基础指令、镜像构建与发布流程,并深入探讨了 Docker 的默认网络、容器互联及自定义网络的实现。 ... [详细]
  • 从 .NET 转 Java 的自学之路:IO 流基础篇
    本文详细介绍了 Java 中的 IO 流,包括字节流和字符流的基本概念及其操作方式。探讨了如何处理不同类型的文件数据,并结合编码机制确保字符数据的正确读写。同时,文中还涵盖了装饰设计模式的应用,以及多种常见的 IO 操作实例。 ... [详细]
  • 使用Vultr云服务器和Namesilo域名搭建个人网站
    本文详细介绍了如何通过Vultr云服务器和Namesilo域名搭建一个功能齐全的个人网站,包括购买、配置服务器以及绑定域名的具体步骤。文章还提供了详细的命令行操作指南,帮助读者顺利完成建站过程。 ... [详细]
  • 在现代网络环境中,两台计算机之间的文件传输需求日益增长。传统的FTP和SSH方式虽然有效,但其配置复杂、步骤繁琐,难以满足快速且安全的传输需求。本文将介绍一种基于Go语言开发的新一代文件传输工具——Croc,它不仅简化了操作流程,还提供了强大的加密和跨平台支持。 ... [详细]
  • MySQL 数据库迁移指南:从本地到远程及磁盘间迁移
    本文详细介绍了如何在不同场景下进行 MySQL 数据库的迁移,包括从一个硬盘迁移到另一个硬盘、从一台计算机迁移到另一台计算机,以及解决迁移过程中可能遇到的问题。 ... [详细]
  • 基于KVM的SRIOV直通配置及性能测试
    SRIOV介绍、VF直通配置,以及包转发率性能测试小慢哥的原创文章,欢迎转载目录?1.SRIOV介绍?2.环境说明?3.开启SRIOV?4.生成VF?5.VF ... [详细]
  • Coursera ML 机器学习
    2019独角兽企业重金招聘Python工程师标准线性回归算法计算过程CostFunction梯度下降算法多变量回归![选择特征](https:static.oschina.n ... [详细]
  • 本文探讨了图像标签的多种分类场景及其在以图搜图技术中的应用,涵盖了从基础理论到实际项目实施的全面解析。 ... [详细]
author-avatar
手浪用户2602928711
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有