Подскажите пожалуйста что почитать чтобы понять как оптимизировать или понять в чем проблема
ТАк если вам нужны все данные из csv, то никак вы жту проблему на своем компе не решите.
Нужно либо больше оперативы в ваш комп, либо сервер используйте, на котором шлюз установлен, либо устанавливайте субд и читайте, как юзать direct query вместо импорта, чтобы нагрузка была в первую очередь на диски, а не оперативу.