MLX: An array framework for Apple silicon
- 安装依赖包
cd llms/phi2
pip install -r requirements.txt
- 模型下载和转换
使用已经下载的模型
mkdir microsoft
ln -s /Users/junjian/HuggingFace/microsoft/phi-2 microsoft/phi-2
转换模型
python convert.py
这将生成 MLX 可以读取的 weights.npz 文件。
-rw-r--r-- 1 junjian staff 5.2G 12 20 20:36 weights.npz
- 运行