У меня та же история была — репа раздулась под 20+ гигов, и git status, pull реально тормозили. Чистка кеша, .gitignore и исключения вроде node_modules хоть чуть помогали, но при больших диффах всё равно тормоза оставались. Shallow clone — это палка о двух концах, иногда нужна вся история, а подкручивать fetch не всегда удобно.
SSD на хосте и gc с репаком ускоряют, но не до уровня, чтобы совсем комфортно стало. Git-lfs — реально для бинарников удобно, но если у тебя в основном скрипты и текст, оно не особо поможет. В итоге я смотрел в сторону разбивки репы на несколько частей, но понимаю, что это не всегда возможно или удобно.
Встречал ещё советы по оптимизации индекса и использовании более легковесных GUI для работы с git, ну и иногда просто жёсткие лимиты на размер коммитов помогают. Если не хочешь дробить — можно попробовать скрипты для автоматической очистки больших веток или архивирование старых, но это уже зависит от процесса в команде и требований к истории.