Llama2-Chinese-7b-Chat安装部署


前言

本文主要介绍如何使用Llama2-Chinese-7b-Chat,最后的效果如图所示:

在这里插入图片描述


一、文件介绍 📁

⬇️ 下载地址:https://pan.baidu.com/s/1smUeYoocrPzwPdjyKpawYg?pwd=22vx 提取码: 22vx
📁 Llama2-Chinses-7B-Chat文件夹中的具体内容如下图所示:
在这里插入图片描述

二、环境配置 ♟

使用的是服务器,版本为NVIDIA GeForce RTX 4090,内存为24GB
选择的Python版本为3.8.16,Anaconda版本为4.9.2

库名 版本
transformers 4.30.2
torch 1.13.1+cu117
baukit 0.01
pandas 1.5.3

详情可见requirements.txt。环境配置步骤如下代码所示:

conda create -n test python=3.8.16 -y
source activate test
pip install -r requirements.txt
cd Llama2-Chinses-7B-Chat

三、Llama2-Chinese-7b-Chat下载 ⏬

Llama2-Chinese-7b-Chat的下载地址是Llama2-Chinese-7b-Chat,可以通过下面的代码进行快速下载⏬,但是需要事先安装好git lfs

cd ..
cd models
url="https://huggingface.co/FlagAlpha/Llama2-Chinese-7b-Chat"
folder="Llama2-Chinese-7b-Chat"
rm -rf "$folder"
while true; do
    git lfs clone $url 
    if [ $? -eq 0 ]; then
        echo "$url weight successfully downloaded."
        break
    else
        echo "$url download failed; retrying..."
    fi
    rm -rf "$folder"
    sleep 10s
done

可以直接进入scripts文件夹sh download_models.sh进行安装。下载之后的models目录如下图所示。
在这里插入图片描述

总结

Llama2-Chinese-7b-Chat对于中文的问题回答能力优秀,希望大家可以通过我的分享来测试它❤️❤️❤️

相关推荐

  1. Chinese-LLaMA-Alpaca-2模型量化部署&测试

    2023-12-18 03:10:02       34 阅读

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2023-12-18 03:10:02       98 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2023-12-18 03:10:02       106 阅读
  3. 在Django里面运行非项目文件

    2023-12-18 03:10:02       87 阅读
  4. Python语言-面向对象

    2023-12-18 03:10:02       96 阅读

热门阅读

  1. 构建一个简单的 npm 验证项目

    2023-12-18 03:10:02       59 阅读
  2. uniAPP里面有router吗

    2023-12-18 03:10:02       52 阅读
  3. PHP代码审计之实战审代码篇1

    2023-12-18 03:10:02       51 阅读
  4. leetcode 572. 另一颗树的子树

    2023-12-18 03:10:02       71 阅读
  5. arcgis图层样式应用geoserver问题

    2023-12-18 03:10:02       68 阅读
  6. unknown error 1146

    2023-12-18 03:10:02       55 阅读
  7. Mysql(事务)

    2023-12-18 03:10:02       79 阅读
  8. 什么是容器编排?

    2023-12-18 03:10:02       70 阅读
  9. 【无标题】

    2023-12-18 03:10:02       69 阅读