Передача большого количества данных в сервис WCF - PullRequest
Новая
       52

Передача большого количества данных в сервис WCF

20 голосов
/ 22 ноября 2011

Я создал веб-сервис в WCF, который возвращает более 54000 строк данных с 10 данными в каждой строке. Я использовал wsHttpBinding для связи. Служба хорошо работает с меньшим количеством данных (например, 2000 строк), но бомбардирует при попытке отправить большой набор записей с 50000+ строками (~ 2 МБ). Сообщение об исключении выглядит следующим образом

Произошла ошибка при получении ответа HTTP на http://localhost:9002/MyService.svc. Это может быть связано с тем, что привязка конечной точки службы не использует протокол HTTP. Это также может быть связано с тем, что сервер прерывает контекст HTTP-запроса (возможно, из-за закрытия службы). Подробнее смотрите в журналах сервера.

Пожалуйста, не говорите мне использовать нумерацию страниц на стороне клиента - я знаю, что это решит проблему. Но мне нужен весь кусок данных на стороне клиента.

Моя конфигурация службы на сервере: 

<system.serviceModel>
  <bindings>
    <wsHttpBinding>
      <binding name="MyWsHttpBinding" />
    </wsHttpBinding>
  </bindings>
  <services>
    <service name="AdminService">
      <endpoint address="AdminSrv"
                binding="wsHttpBinding"
                contract="IAdminService"/>
      <endpoint address="mex" binding="mexHttpBinding" contract="IMetadataExchange" />
      <host>
        <baseAddresses>
          <add baseAddress="/Bus/IRfotoWCF" />
        </baseAddresses>
      </host>
    </service>
  </services>
  <behaviors>
    <serviceBehaviors>
      <behavior>
        <!-- To avoid disclosing metadata information, 
                  set the value below to false and remove the metadata endpoint above before deployment -->
        <serviceMetadata httpGetEnabled="True"/>
        <!-- To receive exception details in faults for debugging purposes, 
                  set the value below to true.  Set to false before deployment 
                  to avoid disclosing exception information -->
        <serviceDebug includeExceptionDetailInFaults="True" />
      </behavior>
    </serviceBehaviors>
  </behaviors>
  <serviceHostingEnvironment multipleSiteBindingsEnabled="true"></serviceHostingEnvironment>
</system.serviceModel>

Моя клиентская конфигурация имеет вид 

<system.serviceModel>
  <bindings>
    <basicHttpBinding>
      <binding name="BasicHttpBinding_IAdminService" closeTimeout="00:01:00"
               openTimeout="00:01:00" receiveTimeout="00:10:00" sendTimeout="00:01:00"
               allowCookies="false" bypassProxyOnLocal="false" hostNameComparisonMode="StrongWildcard"
               maxBufferSize="65536" maxBufferPoolSize="524288" maxReceivedMessageSize="65536"
               messageEncoding="Text" textEncoding="utf-8" transferMode="Buffered" 
               useDefaultWebProxy="true">
        <readerQuotas maxDepth="32" maxStringContentLength="8192" maxArrayLength="16384" 
                      maxBytesPerRead="4096" maxNameTableCharCount="16384" />
        <security mode="None">
          <transport clientCredentialType="None" proxyCredentialType="None" realm="" />
          <message clientCredentialType="UserName" algorithmSuite="Default" />
        </security>
      </binding>
    </basicHttpBinding>
  </bindings>
  <client>
    <endpoint address="http://localhost/TestService/AdminService.svc" 
              binding="basicHttpBinding" bindingConfiguration="BasicHttpBinding_IAdminService"
              contract="IAdminService" name="BasicHttpBinding_IAdminService" />
  </client>
</system.serviceModel>

Может ли кто-нибудь помочь мне с точной настройкой как на стороне клиента, так и на стороне сервера. Даже если мне нужно изменить привязку с wsHttpBinding на netTcpBinding - у меня нет проблем с этим. Заранее спасибо.

Ответы [ 3 ]

33 голосов
/ 23 ноября 2011

После долгих исследований в конце концов я нашел решение.На самом деле необходимо изменить ряд вещей.

Следующие изменения необходимо сделать в На стороне сервера .

Сначала Мне пришлосьустановите maxRequestLength на большее значение в моем элементе httpRuntime , чтобы выполнить запрос на более длительный период. 

<system.web>    
<httpRuntime maxRequestLength="102400" />
</system.web>

Второй я представил netTcpBinding связывание с пользовательскими изменениями на maxBufferSize, maxBufferPoolSize, maxReceivedMessageSize с большим значением 2147483647. 

<binding name="myNetTcpBinding" 
maxBufferPoolSize="2147483647" 
maxBufferSize="524288" 
maxReceivedMessageSize="2147483647">

Третий add maxItemsInObjectGraph в обоих serviceBehaviorsи endpointBehaviors как показано ниже (не забудьте упомянуть имена поведения в узле service и endpoint) 

    <behaviors>
      <serviceBehaviors>        
        <behavior name="myNetTcpBehaviour">
          <serviceMetadata httpGetEnabled="true"/>
          <serviceDebug includeExceptionDetailInFaults="true"/>
          <dataContractSerializer maxItemsInObjectGraph="2147483647"/>
        </behavior>
      </serviceBehaviors>
      <endpointBehaviors>
        <behavior name="myNetTcpEndPointBehaviour">
          <dataContractSerializer maxItemsInObjectGraph="2147483647"/>
        </behavior>
      </endpointBehaviors>
    </behaviors>

Наконец моя конфигурация сервера выглядит следующим образом 

<system.web>    
    <httpRuntime maxRequestLength="102400" />
</system.web>


  <system.serviceModel>
    <bindings>
      <wsHttpBinding>
        <binding name="MyWsHttpBinding" />
      </wsHttpBinding>
      <netTcpBinding>
        <binding name="myNetTcpBinding"
                 closeTimeout="00:01:00"
                 openTimeout="00:01:00"
                 receiveTimeout="00:10:00"
                 sendTimeout="00:01:00"
                 transactionFlow="false"
                 transferMode="Buffered"
                 transactionProtocol="OleTransactions"
                 hostNameComparisonMode="StrongWildcard"
                 listenBacklog="10"
                 maxBufferPoolSize="2147483647"
                 maxBufferSize="524288"
                 maxConnections="10"
                 maxReceivedMessageSize="2147483647">
          <readerQuotas maxDepth="32"
                        maxStringContentLength="8192"
                        maxArrayLength="16384"
                        maxBytesPerRead="4096"
                        maxNameTableCharCount="16384" />
          <reliableSession ordered="true"
                           inactivityTimeout="00:10:00"
                           enabled="false" />
          <security mode="Transport">
            <transport clientCredentialType="Windows" protectionLevel="EncryptAndSign" />
          </security>
        </binding>
      </netTcpBinding>
    </bindings>
    <services>
      <service name="AdminService" behaviorConfiguration="myNetTcpBehaviour">
        <endpoint address="AdminSrv" 
                  binding="netTcpBinding" 
                  bindingConfiguration="myNetTcpBinding"
                  contract="IAdminService"
                  behaviorConfiguration="myNetTcpEndPointBehaviour"/>

        <endpoint address="mex" binding="mexHttpBinding" contract="IMetadataExchange" />
        <host>
          <baseAddresses>
            <add baseAddress="/Bus/IRfotoWCF" />
          </baseAddresses>
        </host>
      </service>
    <behaviors>
      <serviceBehaviors>        
        <behavior name="myNetTcpBehaviour">
          <serviceMetadata httpGetEnabled="true"/>
          <serviceDebug includeExceptionDetailInFaults="true"/>
          <dataContractSerializer maxItemsInObjectGraph="2147483647"/>
        </behavior>
      </serviceBehaviors>
      <endpointBehaviors>
        <behavior name="myNetTcpEndPointBehaviour">
          <dataContractSerializer maxItemsInObjectGraph="2147483647"/>
        </behavior>
      </endpointBehaviors>
    </behaviors>
    <serviceHostingEnvironment multipleSiteBindingsEnabled="true"></serviceHostingEnvironment>
  </system.serviceModel>

Теперь в конфигурации на стороне клиента вам нужно изменить maxBufferSize="2147483647" maxBufferPoolSize="524288" maxReceivedMessageSize="2147483647"

и , также вам нужно добавить maxItemsInObjectGraph="2147483647" в конечной точкеконфигурация поведения. 

        <endpointBehaviors>
            <behavior name="myEndPointBehavior">
                <dataContractSerializer maxItemsInObjectGraph="2147483647" />
            </behavior>
        </endpointBehaviors>

Теперь я могу передать 30000 строк в 5.30 мин , где запрос выполняется для10 секунд, так что время передачи составляет 5,20 мин. - все еще много .

Не стесняйтесь комментировать и любые предложения по улучшению.

1 голос
/ 22 ноября 2011

Если вы посмотрите на детали привязки, они не полностью совпадают на сервере и на стороне клиента. Атрибуты для maxBufferSize, maxBufferPoolSize, maxReceivedMessageSize также должны быть определены на стороне сервера. А затем вам нужно поместить значения в соответствии с размером, который вы смотрите.

0 голосов
/ 20 апреля 2017

Вместо использования for loop over WCF для громоздких данных, используйте пользовательский тип таблицы (если вы используете SQL). Это сократит время с 6 минут до 15-20 секунд.

...