Как рассчитать оптимальный размер чанка для загрузки больших файлов

Если вас беспокоит нехватка ресурсов, то оптимум, вероятно, лучше всего определяется путем оценки параллелизма загрузки при пиковых нагрузках в сравнении с доступной памятью вашей системы. Количество одновременных загрузок, которые вы выполняете за раз, будет ключевой критической переменной в любом расчете, который вы можете сделать. Все, что вам нужно сделать, это убедиться, что у вас достаточно памяти для обработки параллелизма загрузки, а это довольно тривиально. Память дешева, и пропускная способность сети, скорее всего, закончится задолго до того, как вы дойдете до точки, в которой параллелизм превысит доступную память.

Что касается производительности, то это не та вещь, которую можно сильно оптимизировать во время проектирования и разработки приложения. У вас должна быть система на месте, пользователи загружают файлы по-настоящему, а затем вы можете отслеживать реальную производительность во время выполнения.

Попробуйте размер фрагмента, который соответствует размеру окна TCP/IP< /а>. Это примерно настолько оптимально, насколько вам действительно нужно получить во время разработки.