windows下部署llama.cpp

下载cmake

下载地址
在这里插入图片描述
解压,设置Path环境变量D:\CMake\bin
打开cmd输入cmake -version
在这里插入图片描述

安装mingw

powershell下执行

Set-ExecutionPolicy RemoteSigned -Scope CurrentUser
iex "& {$(irm get.scoop.sh)} -RunAsAdmin"
scoop bucket add extras
scoop bucket add main
scoop install mingw

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

安装w64devkit

去官网下载
https://www.mingw-w64.org/
在这里插入图片描述
github地址
在这里插入图片描述
双击运行w64devkit.exe,查看cmake、gcc版本
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

下载llama.cpp代码

下载
在这里插入图片描述
CMake方式
进入llama.cpp-master文件夹

mkdir build
cd build
cmake ..
cmake --build . --config Release

在这里插入图片描述
w64DevKit方式

cd d:
cd development/python/llama.cpp-master
make

在这里插入图片描述
编译成功
在这里插入图片描述
可以看到main.exe等文件
在这里插入图片描述
查看效果
在这里插入图片描述

上面的编译失败也可以选择下载编译好的
下载地址

参考
参考

相关推荐

最近更新

  1. docker php8.1+nginx base 镜像 dockerfile 配置

    2024-04-02 17:22:01       98 阅读
  2. Could not load dynamic library ‘cudart64_100.dll‘

    2024-04-02 17:22:01       106 阅读
  3. 在Django里面运行非项目文件

    2024-04-02 17:22:01       87 阅读
  4. Python语言-面向对象

    2024-04-02 17:22:01       96 阅读

热门阅读

  1. synchronized、volatile、CAS 三者之间有什么区别

    2024-04-02 17:22:01       37 阅读
  2. ChatGPT 辅助编程 | 帮你学前端

    2024-04-02 17:22:01       35 阅读
  3. 力扣(数组)第三大数

    2024-04-02 17:22:01       41 阅读
  4. android QtScrcpy 共享屏幕 获取本地Address

    2024-04-02 17:22:01       35 阅读
  5. Docker中安装PostgreSQL

    2024-04-02 17:22:01       44 阅读
  6. Github 2024-03-30 Rust开源项目日报 Top10

    2024-04-02 17:22:01       39 阅读
  7. Kafka安装

    2024-04-02 17:22:01       39 阅读
  8. Rust---复合数据类型之字符串(1)

    2024-04-02 17:22:01       42 阅读
  9. LeetCode题练习与总结:最大子数组和

    2024-04-02 17:22:01       46 阅读
  10. 微信的个人号接口

    2024-04-02 17:22:01       47 阅读