人工智能_大模型050_模型微调010_模型数据_模型WEB界面代码记录---人工智能工作笔记0185

上面我们把chatglm3的训练代码,和llama2的训练代码,都记录了,然后,再就是:

web_demo的代码我们记录一下,然后,我们就继续说下面的内容.至于data目录中的内容,都是一些训练数据,我会

放到资源中,提供下载,这里就不贴出来了,太大了.

E:\2024\人工智能\fine-tuning-lab\fine-tuning-lab-4\web_demo\api_keys.env

OPENAI_API_KEY=""

E:\2024\人工智能\fine-tuning-lab\fine-tuning-lab-4\web_demo\db_client.py

from dotenv import load_dotenv
load_dotenv("api_keys.env")
import os
import re
import json
import requests
import weaviate
from tqdm import tqdm

def rrf(rankings, k=60):
    if not isinstance(rankings, list):
        raise ValueError("Rankings should be a list.")
    scores = dict()
    for ranking in rankings: