[转载搬运] 本地部署ai小说软件 [1+56][百度盘]

qi79361439

内存低于16G的铁子们就不用尝试了

15267158147

qi79361439 发表于 2024-3-10 17:48
# V; S1 I  J5 a* z( o% \4 i我是16G内存，不够用，直接吃满了然后就卡死了，可惜

0 X+ X4 r  |' d+ t你不带脑子怪谁，我都教你怎么降低内存使用了，再说里面还有小模型，你不会看吗
/ G$ U# o/ t* I/ B" z

police493625

应该发个最低配置呀，否则就是画饼呀

15267158147

police493625 发表于 2024-3-10 17:56
" }) w8 {0 T5 R9 Q. h应该发个最低配置呀，否则就是画饼呀

) f9 e# Z, H. x8 s8 Q% K+ Z最低2G
5 j) e# x$ v* g  Y

15267158147

15267158147 发表于 2024-3-10 17:56
最低2G

  j5 `+ t. ~) q) g" |我没说吗，最低2G就能用
) ]9 D' O/ d7 g: H0 n

dacunge520

A卡能玩吗，i5 9600fk，显卡6600xt，16G内存

15267158147

dacunge520 发表于 2024-3-10 18:00
A卡能玩吗，i5 9600fk，显卡6600xt，16G内存

可以
( h% D# Y( ^6 l& R- q

qi79361439

15267158147 发表于 2024-3-10 17:55
你不带脑子怪谁，我都教你怎么降低内存使用了，再说里面还有小模型，你不会看吗
4 ]( H, ?! d3 G8 S! T7 d, { ...

, }+ n% A% M* P3 b这么强的攻击性啊？你那几个模型我都试了，都是16G吃满然后加载极其缓慢，我放在M2的固态都要加载十几分钟，加载完之后，聊天模型也有问题，回答速度也极其缓慢
2 D7 ^9 p' Y) `5 J+ J2 Y

qi79361439

15267158147 发表于 2024-3-10 17:55
你不带脑子怪谁，我都教你怎么降低内存使用了，再说里面还有小模型，你不会看吗
...

而且软件回答过程中我的CPU也是满载，显卡是8G显存的3070，显存也没用上
6 \* I( T& ^( ?( M

qi79361439

东西有问题不让说，上来直接嘴臭，这么急？

15267158147

qi79361439 发表于 2024-3-10 18:22
8 R! A! F! _( L  c而且软件回答过程中我的CPU也是满载，显卡是8G显存的3070，显存也没用上

  S; y! M) m6 c你不适合这个，别玩了

qi79361439

15267158147 发表于 2024-3-10 18:25
( I$ d) ~) k/ ~0 l: E% w你不适合这个，别玩了

" F$ L5 l: P4 o8 l$ A2 K8 {已经删了，解压完74G，太占地方了，5币就当支持你分享东西了

dacunge520

15267158147 发表于 2024-3-10 18:03
可以

( n' L4 c; W+ g1 {我下好了，情况是这样，原本的几个模型我配置不了，说是内存不够。于是我下了个2g多的模型的试试，然后GPU用不了，说没有检测到n卡驱动，但是我a卡，于是我又换成CPU，配置成功，可以用，但是一分钟一个字这样子，还有办法优化吗？

8 I5 m& d: q! k7 }* ?

15267158147

dacunge520 发表于 2024-3-10 18:55
' i5 V. L/ V% {% U1 [! C我下好了，情况是这样，原本的几个模型我配置不了，说是内存不够。于是我下了个2g多的模型的试试，然后GP ...

5 R, K  s3 \4 ^) a' q9 W& b我有说过怎么降低运行方式，你看看我说的解决办法
& W' R' ]4 R. W# x! p

玄天教主

楼主，有群不！加个问问这个软件怎么用！

AA89165556

大佬怎么读取模型啊我就主页选了一个那个是读取吗

AA89165556

大佬们，我是gpu拉爆但是内存和显存吃的少，这样对吗

15267158147

AA89165556 发表于 2024-3-11 03:42
9 G) W; o' O) f2 c大佬们，我是gpu拉爆但是内存和显存吃的少，这样对吗

对的，它有三种运行方式，显存和内存也能用，你现在的模型没有用显存和内存所以吃的少，你如果想换显存或者内存，你可以在设置那里切换
# M1 [1 s# H& m% o

1146++

转换失败-exit status 1  是怎么回事？

1150894368

请问为什么点了右上角的运行就读取模型啊，无限循环了