ANTICHAT Forum
HOME FORUMS MEMBERS RECENT POSTS LOG IN  
НОВЫЕ ТОРГОВАЯ НОВОСТИ
loading...
Скрыть
Вернуться   ANTICHAT > ТЕХНОЛОГИИ И AI > Искусственный интеллект (AI)
   
Ответ
 
Опции темы Поиск в этой теме Опции просмотра

LLM без интернета — реально запустить?
  #1  
Старый Вчера, 07:40
Марат
Познающий
Регистрация: 10.05.2003
Сообщений: 38
С нами: 12106523

Репутация: 1
По умолчанию LLM без интернета — реально запустить?

Парни, кто пробовал ставить крупные языковые модели типа LLaMA или GPT-4all локально? Как там с ресурсами и скоростью? У меня машина не сервер, но есть нормальная видеокарта, думаю, если не для коммерческого, так для личного юза подойдёт. Какие варианты реально работают без качания полтерабайтных весов? И лучше ли брать легковесные модели или сразу замахиваться на что-то покрупнее? Поделитесь опытом, кто что пробовал и на что стоит обратить внимание, чтобы не жалеть потом.
 
Ответить с цитированием
Ответ



Предыдущая тема Следующая тема

Здесь присутствуют: 1 (пользователей: 0 , гостей: 1)
 


Быстрый переход




ANTICHAT ™ © 2001- Antichat Kft.