memopro
github.com
面向 PyTorch 开发者的内存上限库,用无损换页让超显存模型照常运行且结果不变。
开源可自部署本地模型命令行LinuxMac
GitHub ★ 3被推荐 1 次
适合做什么
适合显存/内存有限的开发者在小 GPU 或笔记本上做 16 位 LoRA 微调、大模型推理与大数据处理。
标签与属性
同类推荐
从零用 PyTorch 实现类 ChatGPT 大模型的教程代码,配套《Build a Large Language Model (From Scratch)》一书。
开源可自部署本地模型LinuxMac
github.com2 处推荐
基于 PyTorch 的深度学习训练框架,自动处理分布式、混合精度等工程细节,几乎无需改代码即可扩展到多卡多机。
开源可自部署本地模型LinuxMac
github.com1 处推荐