Как загрузить большие (> 25 МБ) файлы в веб-службу?

В дополнение к httpRuntime/maxRequestLength, упомянутому в вопросе, похоже, что есть дополнительный элемент, который можно добавить в файл web.config веб-службы, чтобы разрешить передачу больших файлов.

  <system.webServer>
    <security>
      <requestFiltering>
        <requestLimits maxAllowedContentLength="2000000000" />
      </requestFiltering>
    </security>
  </system.webServer>

Похоже, это позволяет загружать большие файлы через веб-сервисы.

Вы должны иметь в виду, что веб-службы изначально не предназначены для передачи файлов. Любой специально разработанный протокол передачи файлов, скорее всего, будет работать лучше, чем веб-служба. Например, такие протоколы с большей вероятностью будут иметь дело с восстановлением после ошибок, частичной загрузкой и т. д.

Однако если вы собираетесь использовать для этой цели веб-службы в .NET, вам следует использовать WCF, если это вообще возможно. Помимо других преимуществ, WCF обрабатывает потоковую передачу и, следовательно, будет намного эффективнее с точки зрения использования памяти. Я обеспокоен тем, что если вы будете следовать двум (точным) предложениям выше, вашим следующим результатом будут исключения «недостаточно памяти или ресурсов», поскольку старая технология ASMX пытается загрузить весь ваш 25-мегабайтный файл в память сразу. На самом деле он может иметь в памяти несколько копий одновременно!

Если бы мне пришлось использовать веб-сервисы и поддерживать очень большие файлы, я бы посмотрел на внедрение системы, позволяющей загружать файлы по частям.

Eg.

• ticketId GetTicket(размер)
• UploadData(ticketId, byte[] payload) (можно вызывать сколько угодно раз)
• FinalizeUpload (тикетид)

Это позволит вам разбивать большие загрузки и не хранить слишком много данных в памяти. Недостатком является то, что вы по-прежнему используете довольно неэффективный транспортный механизм.

Просто чтобы добавить информацию для людей, гуглящих этот web.config:

C:\Program Files\Common Files\Microsoft Shared\Web Server Extensions\12\ISAPI

<location path="Copy.asmx"> <!-- Name of you asmx -->
    <system.webServer>
      <security>
        <requestFiltering>
          <requestLimits maxAllowedContentLength="104857600"/> <!-- 100 megs -->
        </requestFiltering>
      </security>
    </system.webServer>
  </location>

Это решило нашу проблему после устранения этой проблемы в течение довольно долгого времени.

Если вы настроены на использование веб-служб для перемещения файлов, я бы по крайней мере рассмотрел возможность использования вложений WS-Attachment/DIME. Основная проблема с отправкой byte[] через веб-службы заключается в том, что они помещаются в тело SOAP, которое кодируется как строка с основанием 64. Такое кодирование файлов увеличивает размер файла на целых две трети в теле мыла (т. е. файл размером 6 МБ становится файлом размером 9 МБ по сети).

Вполне вероятно, что ваша загрузка размером 25 МБ превращается в ОГРОМНЫЕ мыльные конверты.

Я настоятельно рекомендую прочитать это. Это может помочь вам попасть в DIME.

Вот отрывок.

Набор инструментов Microsoft WSE Toolkit позволяет отправлять большие вложения вместе с методом веб-службы с использованием стандартов DIME и WS-Attachments. Мы рассмотрим эти стандарты и объясним, почему они более эффективны, чем отправка больших объемов двоичных данных в вызове веб-службы с помощью других распространенных средств.

Надеюсь, это поможет!

maxRequestLength указывается в КБ, а не в байтах. Это должно дать вам ограничение в 30 МБ в течение 4-минутного тайм-аута.

<httpRuntime executionTimeout="240" maxRequestLength="30000" />

Наличие слишком высоких чисел может на самом деле препятствовать применению ваших значений. Думаю, я столкнулся с этим несколько лет назад, когда подумал, что это ограничение в байтах (нечеткая память).

Это конкретно не отвечает на ваш вопрос, но в прошлом я использовал WCF для передачи имен/путей/списков файлов, но затем использовал библиотеку FTP для передачи файла через FTP.

это сработало для меня:

            <binding name="uploadFilesBasicHttpBinding" maxReceivedMessageSize="2147483647" maxBufferSize="2147483647" maxBufferPoolSize="2147483647" receiveTimeout="00:10:10" sendTimeout="00:10:00" openTimeout="00:10:00" closeTimeout="00:10:00">
                <readerQuotas maxArrayLength="2147483647" maxBytesPerRead="2147483647" maxDepth="2147483647" maxNameTableCharCount="2147483647" maxStringContentLength="2147483647"/>
                <security mode="TransportWithMessageCredential">
                    <message clientCredentialType="UserName"/>
                </security>
            </binding>