Valkey 9.2 traz snapshots sem fork, sets mais rápidos e replicação comprimida
Linux Notícias Open Source Software Software livre Tecnologia

Valkey 9.2 chega com backups sem fork, menor uso de memória e replicação mais rápida

O Valkey 9.2 oferece melhorias importantes como snapshots sem fork, que aumentam a velocidade e reduzem o uso de recursos. Ele também aprimora os sorted sets para operações mais rápidas e introduz replicação comprimida, otimizando a sincronização entre servidores. Além disso, as atualizações no caching tornam o sistema mais eficiente para aplicações de inteligência artificial, garantindo melhor desempenho e escalabilidade.

O 9.2 já está disponível e traz uma série de melhorias para empresas e desenvolvedores que utilizam bancos de dados em memória. A nova versão do projeto de código aberto aposta principalmente na redução dos custos de infraestrutura, no melhor aproveitamento da memória RAM e no aumento da eficiência em operações com grandes volumes de dados.

Entre as principais novidades estão os snapshots sem fork, a compressão contínua da replicação e uma nova estrutura baseada em árvore B+ para grandes conjuntos ordenados. Segundo os desenvolvedores, essas mudanças podem reduzir significativamente o consumo de recursos em determinadas cargas de trabalho.

A atualização também apresenta o Path Hash, um novo tipo de dado voltado à busca em estruturas hierárquicas, além de funções adicionais para controle de acesso, monitoramento de chaves muito utilizadas e execução de operações condicionais.

O Valkey é um armazenamento de dados em memória de código aberto, mantido sob o guarda-chuva da Linux Foundation. Ele é utilizado em aplicações que precisam de respostas rápidas, como sistemas de cache, filas de mensagens, gerenciamento de sessões, rankings e serviços que trabalham com dados em tempo real.

Snapshots sem fork reduzem os picos de consumo de memória

Uma das mudanças mais importantes do Valkey 9.2 está na maneira como o servidor realiza snapshots do banco de dados.

Tradicionalmente, a criação de um snapshot RDB utiliza uma operação chamada fork. Nesse processo, o servidor inicia um novo processo para produzir uma cópia dos dados. Embora essa abordagem permita preservar a consistência das informações durante a gravação, ela pode provocar um aumento expressivo no consumo de memória.

O problema fica mais evidente em ambientes com muitas operações de escrita. O mecanismo copy-on-write pode fazer com que páginas de memória sejam duplicadas à medida que os dados originais são modificados. Em determinadas situações, o consumo temporário de RAM pode chegar perto do dobro do necessário.

Com o Valkey 9.2, os snapshots podem ser executados por uma thread em segundo plano, sem a necessidade de criar um processo separado. A funcionalidade também pode ser utilizada durante a sincronização completa de réplicas.

Isso ajuda a reduzir a pressão sobre a memória e permite dimensionar servidores de maneira mais próxima das necessidades reais das aplicações.

Entretanto, o recurso não é ativado automaticamente em todas as instalações. O administrador precisa habilitar as configurações correspondentes, como forkless-infrastructure-enabled e forkless-policy.

Existe ainda um detalhe importante: a infraestrutura necessária para esse mecanismo acrescenta quatro bytes por chave. Portanto, o ganho precisa ser avaliado considerando o tamanho e o perfil de uso da base de dados.

Grandes sorted sets ficam mais rápidos e econômicos

Outra melhoria relevante envolve os chamados sorted sets, estruturas que armazenam elementos associados a pontuações e mantêm esses registros organizados.

Esse tipo de dado aparece em diferentes aplicações. Sistemas de classificação, placares de jogos, rankings de usuários e filas de prioridade são exemplos de cenários que podem depender de conjuntos ordenados.

Nas versões anteriores, grandes sorted sets utilizavam uma estrutura conhecida como skiplist. Embora seja eficiente em diversas situações, ela pode apresentar um custo considerável de memória quando trabalha com milhões de elementos.

No Valkey 9.2, esses conjuntos maiores passam a utilizar uma árvore B+.

A mudança reduz o espaço necessário para armazenar cada elemento e melhora o desempenho de determinadas operações. De acordo com os dados divulgados pelo projeto, os testes com cinco milhões de elementos e registros de 20 bytes indicaram uma redução de aproximadamente 36% a 43% no consumo de memória por membro.

As atualizações também podem ficar até 105% mais rápidas, dependendo da operação e das características da carga de trabalho.

É importante observar que esses números representam resultados de testes específicos. O desempenho real pode variar conforme o padrão de inserção, atualização e remoção dos dados.

Compressão da replicação reduz o tráfego de rede

O Valkey 9.2 também procura resolver um problema comum em infraestruturas distribuídas: o volume de dados transferido entre servidores.

Em ambientes com replicação contínua, o servidor principal precisa enviar alterações para suas réplicas. Quando os sistemas estão distribuídos entre diferentes regiões, esse tráfego pode representar custos adicionais de rede e aumentar o tempo necessário para sincronizar os dados.

A nova versão introduz a configuração repl-compression, que permite comprimir o fluxo de replicação.

O projeto informa que a compressão pode reduzir o tráfego contínuo entre 50% e 65%, dependendo das condições de uso. Em um benchmark divulgado pelos desenvolvedores, o LZ4 reduziu a largura de banda em aproximadamente 52%, com impacto inferior a 1% na taxa de transferência daquele teste.

A compressão também pode ser utilizada nos arquivos RDB. O Valkey 9.2 amplia as opções disponíveis para incluir LZ4 e Zstandard, conhecido como Zstd.

Com o LZ4, o tamanho dos arquivos de backup pode cair em até 80% em determinados cenários. Já o Zstandard oferece uma alternativa com maior potencial de compressão, especialmente interessante quando o custo de transferência de dados é elevado.

A sincronização de novas réplicas também recebeu melhorias. Segundo o projeto, elas podem concluir esse processo aproximadamente 35% mais rápido.

Path Hash adiciona um novo tipo de dado

Entre as novidades funcionais está o Path Hash, uma estrutura baseada em árvore radix que permite trabalhar com caminhos hierárquicos.

O recurso oferece comandos para realizar buscas exatas, percorrer prefixos e encontrar o prefixo mais longo correspondente a determinado caminho.

Na prática, isso pode facilitar o desenvolvimento de sistemas que precisam localizar informações organizadas em estruturas semelhantes a diretórios, rotas de APIs ou caminhos de recursos.

Um exemplo seria uma aplicação que recebe uma solicitação para /api/v2/billing/invoices/123. Com o Path Hash, ela pode localizar rapidamente a rota mais específica cadastrada para aquele endereço.

A novidade também pode ajudar em sistemas de inteligência artificial. Aplicações de inferência frequentemente precisam reutilizar partes de contextos já processados, evitando repetir cálculos desnecessários.

Nesse cenário, o Valkey pode funcionar como um índice rápido para localizar informações armazenadas na memória do servidor ou da GPU.

Novos recursos de segurança e administração

A versão 9.2 também melhora o gerenciamento de permissões com a introdução de funções reutilizáveis no sistema de controle de acesso, conhecido como ACL.

Os administradores podem criar papéis com conjuntos de permissões e atribuí-los a diferentes usuários. Isso reduz a necessidade de repetir regras individualmente e facilita a manutenção de políticas de acesso em ambientes com muitas contas.

Outra novidade é a detecção de hot keys, ou chaves muito acessadas. Com os comandos HOTKEYS GET e HOTKEYS RESET, o administrador pode identificar quais registros concentram mais operações.

Esse tipo de informação ajuda a encontrar possíveis gargalos e entender por que determinadas partes do banco de dados recebem uma carga desproporcional.

O Valkey 9.2 também introduz mecanismos para lidar melhor com réplicas atrasadas. O recurso opcional de limitação de replicação pode reduzir temporariamente operações de escrita quando uma réplica começa a ficar para trás, evitando que ela precise realizar uma sincronização completa.

Comandos condicionais ampliam as possibilidades de desenvolvimento

A atualização acrescenta ainda novos recursos para executar operações somente quando determinadas condições são atendidas.

O comando EXEC, por exemplo, passa a aceitar condições como IFEQ, IFNE, NX e XX. Isso permite implementar determinados mecanismos de bloqueio otimista em transações sem depender obrigatoriamente do comando WATCH.

Também chega o comando DELEX, que permite excluir uma chave somente quando seu valor corresponde — ou não corresponde — ao conteúdo especificado.

Para operações numéricas, o novo INCREX permite incrementar uma chave e configurar sua expiração em uma única operação atômica.

Já no trabalho com streams, os comandos XACKDEL e XDELEX oferecem novas possibilidades para confirmar e remover mensagens, inclusive considerando se ainda existem grupos de consumidores que precisam delas.

Vale a pena atualizar para o Valkey 9.2?

O Valkey 9.2 é uma atualização importante para quem utiliza o banco de dados em aplicações que exigem baixa latência, alta disponibilidade e grande volume de operações.

Os ganhos mais interessantes aparecem em ambientes com grandes conjuntos ordenados, replicação entre servidores e operações frequentes de backup. A possibilidade de reduzir o consumo de memória durante snapshots também pode ajudar empresas a evitar o provisionamento de recursos adicionais apenas para lidar com picos temporários.

A versão é classificada pelo projeto como uma atualização secundária, sem mudanças incompatíveis que impeçam, em geral, a atualização. Mesmo assim, administradores devem testar a nova versão antes de aplicá-la em ambientes críticos.

Também é recomendável ter cuidado ao habilitar recursos que alteram formatos de arquivos ou comportamentos de persistência. Caso seja necessário voltar para uma versão anterior, alguns desses dados podem exigir procedimentos específicos de compatibilidade.

No conjunto, o Valkey 9.2 reforça a proposta de oferecer um armazenamento em memória rápido e eficiente, mas com atenção crescente aos custos de operação. Em infraestruturas que trabalham com milhões de registros, replicação distribuída e aplicações de inteligência artificial, economizar memória e tráfego de rede pode representar uma diferença importante.

Edivaldo Brito é analista de sistemas, gestor de TI, blogueiro e também um grande fã de sistemas operacionais, banco de dados, software livre, redes, programação, dispositivos móveis e tudo mais que envolve tecnologia.