Оптимизация запросов EF Core 3.1 - PullRequest
Новая
       5

Оптимизация запросов EF Core 3.1

2 голосов
/ 03 февраля 2020

Время от времени я слышу, что EF Core 3.1 теперь способен оптимизировать группирование и несколько агрегатных функций, таких как sum, для выполнения в базе данных. Почему мой код C# отправляет этот сильно неоптимизированный код SQL на сервер базы данных? 

using var dbContext = new DatabaseContext();
var someTableData = await dbContext.SomeTable
    .GroupBy(x => x.Foobar)
    .Select(x => new { Foobar = x.Key, Quantity = x.Sum(y => y.Quantity) })
    .OrderByDescending(x => x.Quantity)
    .Take(10)
    .ToListAsync();

SQL (скопировано из журнала Entity Framework): 

SELECT [...] FROM public."SomeTable"

As Вы можете увидеть: запрос не содержит упорядочения, группировки, суммирования, ...

Я решил свою проблему, создав представление, так как оригинальный запрос ef core увеличил использование оперативной памяти приложения на 2 ГБ (в 2 во-вторых) поскольку в таблице было много записей. Но мой вопрос остается: что я сделал не так? Это потому, что я использую PostgreSQL (Npg sql .EntityFrameworkCore. PostgreSQL v3.1.0)?

1 Ответ

1 голос
/ 03 февраля 2020

Я отправил ваш запрос в систему быстрого тестирования (см. Определение проекта со всеми версиями пакета nuget ниже): 

public class SomeTable
{
    public int Id { get; set; }
    public int Foobar { get; set; }
    public int Quantity { get; set; }
}

class MyDbContext : DbContext
{
    public DbSet<SomeTable> SomeTables { get; set; }
    public static readonly LoggerFactory DbCommandConsoleLoggerFactory
        = new LoggerFactory(new[] {
            new ConsoleLoggerProvider ((category, level) =>
                category == DbLoggerCategory.Database.Command.Name &&
                level == LogLevel.Trace, true)
        });
    protected override void OnConfiguring(DbContextOptionsBuilder optionsBuilder)
    {
        optionsBuilder.UseNpgsql("Server=...;Port=5432;Database=test;User Id=...;Password=...;")
        //optionsBuilder.UseSqlServer("Server=.\\SQLEXPRESS;Database=test;Trusted_Connection=true")
                    .UseLoggerFactory(DbCommandConsoleLoggerFactory)
                    .EnableSensitiveDataLogging();
        base.OnConfiguring(optionsBuilder);
    } 
}

class Program
{
    static void Main(string[] args)
    {
        var context = new MyDbContext();
        var someTableData = context.SomeTables
                .GroupBy(x => x.Foobar)
                .Select(x => new { Foobar = x.Key, Quantity = x.Sum(y => y.Quantity) })
                .OrderByDescending(x => x.Quantity)
                .Take(10);
        Console.Write(someTableData);
        Console.ReadKey();
    }
}
/*csproj file contents below:
<Project Sdk="Microsoft.NET.Sdk">

  <PropertyGroup>
    <OutputType>Exe</OutputType>
    <TargetFramework>netcoreapp3.1</TargetFramework>
    <RootNamespace>ef_core3_playground</RootNamespace>
  </PropertyGroup>

  <ItemGroup>
    <PackageReference Include="Microsoft.EntityFrameworkCore" Version="3.1.1" />
    <PackageReference Include="Microsoft.EntityFrameworkCore.InMemory" Version="3.1.1" />
    <PackageReference Include="Microsoft.EntityFrameworkCore.Relational" Version="3.1.1" />
    <PackageReference Include="Microsoft.EntityFrameworkCore.SqlServer" Version="3.1.1" />
    <PackageReference Include="Microsoft.Extensions.Logging.Console" Version="1.1.0" />
    <PackageReference Include="Npgsql.EntityFrameworkCore.PostgreSQL" Version="3.1.1" />
  </ItemGroup>

</Project>
*/

В итоге я получил SQL для соответствующих провайдеров: 

--MS SQL
SELECT TOP(@__p_0) [s].[Foobar], SUM([s].[Quantity]) AS [Quantity]
FROM [SomeTables] AS [s]
GROUP BY [s].[Foobar]
ORDER BY SUM([s].[Quantity]) DESC

-- PG SQL
SELECT s."Foobar", SUM(s."Quantity")::INT AS "Quantity"
FROM "SomeTables" AS s
GROUP BY s."Foobar"
ORDER BY SUM(s."Quantity")::INT DESC
LIMIT @__p_0

Это заставляет меня задуматься, может ли ваш провайдер / EF, указанный c версиями, дать вам такой результат? Хотя, глядя на diff между двумя выпусками npg sql , я не вижу ничего, связанного с этой проблемой, но я бы посоветовал вам попробовать обновить все пакеты, связанные с EF, до 3.1.1 и повторить тест.

...