ANTICHAT Forum
HOME FORUMS MEMBERS RECENT POSTS LOG IN  
НОВЫЕ ТОРГОВАЯ НОВОСТИ
loading...
Скрыть
Вернуться   ANTICHAT > ТЕХНОЛОГИИ И AI > Искусственный интеллект (AI)
   
 
 
Опции темы Поиск в этой теме Опции просмотра

Кто юзает AI на слабом железе — что реально работает?
  #1  
Старый Вчера, 21:50
2pac
Новичок
Регистрация: 30.03.2003
Сообщений: 12
С нами: 12166138

Репутация: 0
По умолчанию Кто юзает AI на слабом железе — что реально работает?

Пробовал запускать разные AI-модели на старом ноуте и слабом десктопе, и понял, что не всё так просто. Вот что заметил: сначала смотрю на вес модели — чем легче, тем лучше. Потом — требования к оперативке и видеокарте. Часто топовые модели требуют GPU с нормальным объёмом памяти, иначе будут лаги или вообще не запустится. Иногда помогает уменьшенная или сжатая версия модели, типа quantized или distilled. Также важно, под какую платформу модель адаптирована — пытался запускать на CPU-only, но некоторые цепляют CUDA и без неё вообще встают. Посмотрел, что локальный запуск часто ограничен, и проще использовать облачные API, если железо совсем слабое. Есть идеи, на что обращать внимание при выборе под слабое железо? Может кто поделится лайфхаками?
 
Ответить с цитированием
 



Предыдущая тема Следующая тема

Здесь присутствуют: 1 (пользователей: 0 , гостей: 1)
 


Быстрый переход




ANTICHAT ™ © 2001- Antichat Kft.