脚本之家,脚本语言编程技术及教程分享平台!
分类导航

Python|VBS|Ruby|Lua|perl|VBA|Golang|PowerShell|Erlang|autoit|Dos|bat|

服务器之家 - 脚本之家 - Python - Pyinstaller打包Pytorch框架所遇到的问题

Pyinstaller打包Pytorch框架所遇到的问题

2022-11-13 10:53Continue_i Python

Pytorch在python界用得比较多,打包容易失败,本文主要介绍了Pyinstaller打包Pytorch框架所遇到的问题,文中介绍的十分详尽,具有一定的参考价值,感兴趣的小伙伴们可以参考一下

前言

第一次尝试用Pyinstaller打包Pytorch,碰见了很多问题,耗费了许多时间!想把这个过程中碰到的问题与解决方法记录一下,方便后来者。

基本流程

使用Pyinstaller打包流程可分为以下三步:

  • 安装Pyinstaller,写个Hello world打包测试
  • 打包整个项目,在本机上调试生成exe
  • 将exe拷贝到新电脑上,测试和调试

一、安装Pyinstaller 和 测试Hello World

使用Pycharm打开项目,点击Terminal,输入以下命令:

pip install pyinstaller

请确保Terminal所在路径为项目根目录,以免在后续打包过程中找不到一些模块。图中红框内(pytorch)是我的项目所需要的虚拟环境。

Pyinstaller打包Pytorch框架所遇到的问题

编写Hello World测试,新建test.py:

if __name__ == '__main__':
print("Hello World!")
while True:
  pass

在Terminal输入以下命令,打包test.py:

pyinstaller -F test.py

回车运行,开始打包!在文件夹dist中找到test.exe程序,运行测试,没报错说明Pyinstaller安装成功。

二、打包整个项目,在本机上调试生成exe

实际的项目一般是多文件,打包过程远比Hello World复杂多了。打包项目的核心要点有两个:

  • 配置好.spec文件
  • 补齐依赖项

关于.spec文件配置详见参考链接一,这里不再赘述。需要注意的是,在测试阶段,打包时应设置为-D模式,方便补齐dll。本文重点讲dll及其依赖项的补齐。先安装必备工具Dependens,通过这个工具,我们可以得到.dll文件所需要的依赖项。在运行打包后的exe常常遇到以下的问题:

Pyinstaller打包Pytorch框架所遇到的问题

这提示我们系统缺少caffe2_nvrtc.dll或其对应的依赖项。

  • 先到对应路径查看caffe2_nvrtc.dll是否存在
  • 若不存在,直接在Anaconda配置环境的文件夹搜索,一般都可以找到。将找到的caffe2_nvrtc.dll复制粘贴到根目录
  • 若存在,说明是缺少caffe2_nvrtc.dll的依赖项,使用Dependencies工具查看所需要的依赖项,后补齐到根目录

Dependencies的使用非常简单,直接将.dll拖进去即可。这里以torch_python.dll举例

Pyinstaller打包Pytorch框架所遇到的问题

可以发现,缺少若干个dll文件,补齐便可。通过上述方法,依样画葫芦,基本可以解决关于dll报错的问题。
  但每次重新打包后,需要手动复制粘贴dll文件,很是麻烦,通过配置.spec文件可简化操作。以记事本方式打开.spec,找到datas:

Pyinstaller打包Pytorch框架所遇到的问题

小括号内有两个路径,第一个路径'kernel32.dll'表示原始数据路径,存放kernel32.dll的路径;第二路径为'.'表示目标路径,打包后原始数据存放的路径。意思就是将第一路径的东西在打包后,放在第二路径上。需要注意的是,这边我设置的是相对路径,相对于.spec中的pathex

Pyinstaller打包Pytorch框架所遇到的问题

 

三、在新电脑上测试

我使用的是pytorch的GPU版本,在新电脑上运行发现会报如下错误,应该是缺少cuda库的缘故。

Pyinstaller打包Pytorch框架所遇到的问题

我的解决办法简单粗暴,直接拷贝cuda包到移动硬盘

Pyinstaller打包Pytorch框架所遇到的问题

每次到新的电脑,添加cuda到环境变量

Pyinstaller打包Pytorch框架所遇到的问题

建议在程序额外设置一个选项,可将网络切换成CPU推理,以便在其他电脑测试时,即使环境未配置成功,也可通过CPU推理验证打包成功与否。最后,祝大家好运,打包成功那一刻是蛮喜悦的!

参考资料

到此这篇关于Pyinstaller打包Pytorch框架所遇到的问题的文章就介绍到这了,更多相关Pyinstaller打包Pytorch 内容请搜索服务器之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持服务器之家!

原文链接:https://www.cnblogs.com/Continue-i/p/16035187.html

延伸 · 阅读

精彩推荐
  • PythonPython爬取APP下载链接的实现方法

    Python爬取APP下载链接的实现方法

    这篇文章主要实现的是批量下载安卓APP。显然用手点是不科学的。于是尝试用Python写了一个半自动化的脚本。所谓半自动化,就是把下载链接批量抓取下来...

    CaptainXero2992020-09-09
  • PythonPython实现HTTP协议下的文件下载方法总结

    Python实现HTTP协议下的文件下载方法总结

    这篇文章主要介绍了Python实现HTTP协议下的文件下载方法总结,包括端点续传下载等功能,需要的朋友可以参考下 ...

    RobinTang18472020-08-20
  • PythonPython操作Sql Server 2008数据库的方法详解

    Python操作Sql Server 2008数据库的方法详解

    这篇文章主要介绍了Python操作Sql Server 2008数据库的方法,结合实例形式分析了Python使用pyodbc库操作Sql Server 2008数据库的连接、执行sql语句、关闭连接等相关操...

    至死孤独8262021-02-21
  • Pythondjango定期执行任务(实例讲解)

    django定期执行任务(实例讲解)

    下面小编就为大家带来一篇django定期执行任务(实例讲解)。小编觉得挺不错的,现在就分享给大家,也给大家做个参考。一起跟随小编过来看看吧...

    再见紫罗兰6592020-12-15
  • PythonLRUCache的实现原理及利用python实现的方法

    LRUCache的实现原理及利用python实现的方法

    LruCache 是 Android 的一个内部类,提供了基于内存实现的缓存,而下面这篇文章主要给大家介绍了关于LRUCache的实现原理以及利用python实现的方法,文中通过...

    蒂米4142020-12-19
  • Pythonpython3+requests接口自动化session操作方法

    python3+requests接口自动化session操作方法

    今天小编就为大家分享一篇python3+requests接口自动化session操作方法,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...

    jaysonzxk7342021-04-07
  • Python深入解析Python中的lambda表达式的用法

    深入解析Python中的lambda表达式的用法

    这篇文章主要介绍了深入解析Python中的lambda表达式的用法,包括其与def之间的区别,需要的朋友可以参考下...

    阿托5902020-07-30
  • PythonPython 操作 MongoDB 讲解详细

    Python 操作 MongoDB 讲解详细

    MongoDB是一款开源的、基于分布式的、面向文档存储的非关系型数据库。拥有高性能、高可用,易扩展的优点,并且支持丰富的查询语言来支持读写操作以及...

    tigeriaf10802022-01-12