GPT4 ALL 本地大模型,无法使用 - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
miaosl
V2EX    OpenAI

GPT4 ALL 本地大模型,无法使用

  •  
  •   miaosl 2023-12-27 10:24:44 +08:00 2707 次点击
    这是一个创建于 728 天前的主题,其中的信息可能已经有所发展或是发生改变。
    昨天熬夜看短视频的时候发现有个开源的,本地语言模型,GPT4 ALL
    项目下载地址:
    https://github.com/nomic-ai/gpt4all/releases/tag/v2.5.4
    但是视频里别人下载完了装完模型就直接用了
    而到我这里下载完模型一校验直接提示:gguf 格式无效无法加载模型
    为提示说原因有很多可能是电脑配置不够,讲道理这些模型下载的时候硬件限制只是内存。
    我还特意去下载了几个小模型,最后还是提示这个。
    我真不知道为啥。
    另外我的笔记本:
    R74800H 16GRAM RTX2060
    讲道理不应该啊
    8 条回复    2023-12-28 21:34:51 +08:00
    Terryu
        1
    Terryu  
       2023-12-28 11:37:52 +08:00
    我是 mac m1pro 32G ,跑起来没问题; 你换台内存大的试试
    cuteguy
        2
    cuteguy  
       2023-12-28 12:08:09 +08:00
    @Terryu 模型用的是哪个?和 openai chatgpt4 比咋样?
    miaosl
        3
    miaosl  
    OP
       2023-12-28 18:26:14 +08:00
    @cuteguy 运行失败了,可能是我电脑配置不够。但是其他人评测还是没有真正得 gpt 比得
    miaosl
        4
    miaosl  
    OP
       2023-12-28 18:27:07 +08:00
    @Terryu 但是讲道理哪些模型给的配置要求就是个内存,我电脑 16G 但是哪个模型要求 8G 就够了啊
    虽然可能就是我电脑配置不足
    gw1100
        5
    gw1100  
       2023-12-28 19:03:43 +08:00
    @miaosl #4 我试了一下,16G 内存可以用 8G 的版本啊,我还教 ai 学中文呢,现在会说‘你的很棒,谢谢’(乐),就是这 8G 版本仍然有点笨,可能 32G 跑 16G 版本可能会好一些,你什么配置啊,不可能有比我还差的配置了
    miaosl
        6
    miaosl  
    OP
       2023-12-28 19:16:31 +08:00
    @gw1100 我 16Gram 然后跑 8G 啊 4G 啊都提示
    Encountered an error loading model:
    "Could not load model due to invalid format for replit-code-v1 5-3b-q4 o.ggufi
    Model loading failures can happen for a variety of reasons, but the most common causes include a bad file format, an incomplete or corrupted download, the wrong file type, not
    enough system RAM or an incompatible model type. Here are some suggestions for resolving the problem:
    Ensure the model file has a compatible format and type
    Check the model file is complete in the download folder
    You can find the download folder in the settings dialog
    If you've sideloaded the model ensure the file is not corrupt by checking md5sum
    Read more about what models are supported in our documentation for the gui
    Check out our discord channel for help
    反正就是加载文件有错,但是这些模型都是从他那个软件本身下载得,如果你这个没问题得话
    那么有问题得就是它确实是模型得问题,这就奇怪了
    话说就是下载软件,然后下载镜像就可以把
    我刚刚发现我目录有 n 个模型但是他只给我显示 4 个
    难道是模型得路径有中文导致得?
    我改下路径试试
    miaosl
        7
    miaosl  
    OP
       2023-12-28 19:21:30 +08:00
    @gw1100 好的果然是路径有中文导致得哈哈哈哈可以用了
    hiwind
        8
    hiwind  
       2023-12-28 21:34:51 +08:00
    其实这是 GPT4(For) All 吧? 4 是代表 For 吧
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     2950 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 32ms UTC 12:57 PVG 20:57 LAX 04:57 JFK 07:57
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86