Каким образом вы реализовывали обработку большого объема данных в своих проектах?