首页
运维笔记
SEO心得
软件程序
网站源码
旗下网站
programmer
登录
标签
QDrant
本地搭建属于自己的ChatGPT:基于PyTorch+ChatGLM-6b+Streamlit+QDrant+DuckDuckGo
本地部署chatglm及缓解时效性问题的思路: 模型使用chatglm-6b 4bit,推理使用hugging face,前端应用使用streamlit或者gradio。
自己的
pytorch
ChatGPT
ChatGLM
QDrant
admin
2小时前
1
0