2024-05-22 10:54

如何训练大模型Llama3?一个视频教会你

#敲黑板划重点

前段时间,Meta开源了第三代大语言模型Llama3,在业界,原生Llama的存在具有奠基石的意义,但这些国外的模型对于中文的支持实在不太理想。于是,我花了一点时间对Llama3进行了微调,本期视频,就教会你轻松展开模型验证、转换和量化的实操。


模型下载链接:https://pan.baidu.com/s/1gu808REN4y9lHwsyIZlByg?pwd=jxlf


训练环境:

WSL2 on Windows 11

Ubuntu 22.04

torch = 2.2.2

python=3.12

cuda 11.8

本内容为作者独立观点,不代表虎嗅立场。未经允许不得转载,授权事宜请联系hezuo@huxiu.com
如对本稿件有异议或投诉,请联系tougao@huxiu.com
正在改变与想要改变世界的人,都在 虎嗅APP
赞赏
关闭赞赏 开启赞赏

支持一下   修改

确定