Hoje estamos lançando Polars 2.0. No anúncio anterior, passamos pela razão do bump de versão. Este post vamos discutir o que o 2.0 traz.
Embora não pretendêssemos torná-lo um grande lançamento de recursos, ele ainda reúne muitas coisas para se entusiasmar. Nossa versão inicial de suporte out-of-core (spill-to-disk) está habilitada, muitas melhorias de desempenho essenciais, suporte SQL de primeira classe, que junto com as melhorias de desempenho torna Polars líder sobre Data Fusion e Duck DB nos benchmarks TPC-H e TPC-DS1, um novo dtype Map, e requisitos mais estritos sobre dtypes e explicitness, levando a feedback mais rápido e iteração de IA mais rápida. Polars 2.0 será o ponto em que vamos tratar SQL como cidadão de primeira classe.
A cobertura SQL no Polars aumentou drasticamente nos últimos meses. No Polars 2.0, queremos habilitá-lo para mais workloads, incluindo SQL. Para torná-lo performante, muitas melhorias foram enviadas para nosso otimizador e motor.
Chamar collect em um Lazy Frame agora padrão para o motor de streaming, levando a melhorias massivas de memória e desempenho na maioria das consultas. Out-of-core (spill to disk) está agora habilitado por padrão. Começa a spiller em ~80% da RAM.
Fonte: Hacker News · Resumido por HeadlinesBriefing