[转载搬运] 本地部署ai小说软件 [1+56][百度盘]

15267158147

1150894368 发表于 2024-3-11 18:09
请问为什么点了右上角的运行就读取模型啊，无限循环了

你要等他模型读取完成，要等会
% K1 L& f6 T. }- O

15267158147

1146++ 发表于 2024-3-11 17:51
. I6 z' @& C: ~" H9 Z: M" A转换失败-exit status 1  是怎么回事？

3 F/ Y, D9 r6 P: W/ P可能网不好，要么内存不够
$ b/ P1 b) {# a0 j8 x) Y8 G

1150894368

15267158147 发表于 2024-3-11 19:34
你要等他模型读取完成，要等会

4 w. L/ z  z  v+ i; `我就是读取好久完成了以后，他叫我点右上角启动。我一点又读取半天，然后读取完了又叫我点右上角，无限循环

15267158147

1150894368 发表于 2024-3-11 19:42
+ }, W. R/ }; s! Z我就是读取好久完成了以后，他叫我点右上角启动。我一点又读取半天，然后读取完了又叫我点右上角，无限循 ...

你试试降低配置，可能是你要读取的配置太高了

1146++

15267158147 发表于 2024-3-11 19:36
可能网不好，要么内存不够

' g( [* W0 J$ U8 {! W换了网，用了小的模型还是不行

OZR10086

求qq群，太多问题一下子还问不清

abc8848

Assistant: 很抱歉，我不能回答这样的问题。作为一名人工智能语言模型，我的任务是提供有用和合适的信息，并且要遵守道德和伦理准则。请问还有其他问题我可以帮忙解答吗？
4 n9 V& I9 @2 F" l9 Y生成不了

1150894368

搞定了，请问关了以后，再用就要重新读取一次吗

kenuola

怎么喂语料，试用了一下，AI都是很大程度避开有关性有关的词语和行为动作描述。

Rasputin

你这个2G咋算的，我预留了10G内存8G显存，仅仅在读取模型有几秒都能给我把内存占用满，末了加载完了还报错cuda memory不够，一堆点号点到第三行末尾就自己跳了。 GPU-2G-1B5-world。
没开始加载是5.7/15.7内存，0.2/8.0显存。加载报错时13.4/15.7；1.2/8.0，这还能显存不够吗？我很好奇这个2G哪里来的。
我也是本地加载过不少stable diffusion模型的。有些还真能把我显存撑爆。但是你这不是明显没满吗？何德何能啊。

Rasputin

Rasputin 发表于 2024-3-13 06:28
你这个2G咋算的，我预留了10G内存8G显存，仅仅在读取模型有几秒都能给我把内存占用满，末了加载完了还报错c ...

换了第二个就成了。你这个第一个模型有点问题吧。

1787047247

大佬，我的strategy选择的CUDA，配置选的GPU-6G-7B-world，模型用的Mobius进行转化，再运行转换后的文件就一直显示“切换模型失败 - Failed to fetch”，有时运行其他模型还会显示遇到问题强制重启，我的电脑显卡是3060，i7-10870H CPU，运行内存16GB

mouse1996

有限制，不能写色情

15267158147

mouse1996 发表于 2024-3-13 11:27
1 b2 k7 g& D+ A& I有限制，不能写色情

8 \, W- }5 h+ O& ~( M- o  ^: O. W你要给他提示，多试几次
2 O  o5 C; g) g1 Q6 n  {" @+ J3 o

15267158147

1787047247 发表于 2024-3-13 08:47
大佬，我的strategy选择的CUDA，配置选的GPU-6G-7B-world，模型用的Mobius进行转化，再运行转换后的文件就 ...

你切换模型的时候要把它运行关闭，才能接着切换模型，还有下载那个模型，我没有下完整模型，我就下了几个，你切换失败大概率是没有那个模型

15267158147

Rasputin 发表于 2024-3-13 06:31
换了第二个就成了。你这个第一个模型有点问题吧。

2 x7 D* O8 u, U6 q3 c) u2g是指小模型可以运行，大模型配置肯定要高啊，难道你指望一两面包车开的比跑车快吗
& z; N( J1 q) B/ C% e2 t% }

15267158147

abc8848 发表于 2024-3-11 23:25
( Q2 S3 v0 X9 BAssistant: 很抱歉，我不能回答这样的问题。作为一名人工智能语言模型，我的任务是提供有用和合适的信息， ...

你把这段话删了，多试几次

mouse1996

怎么让他像小说一样写.总是写几十个字就开始乱对话

qilianshan

15267158147 发表于 2024-3-10 12:11
如果你的模型加载不出来，你可以看看左上角你的什么比较大，内存，显存还是gpu，然后你可以找到配置，找到 ...

16g内存，转换的时候直接内存拉满，然后转换失败怎么办

xc5566521xc

失效了补下档吧