Probabilistic data structures: HyperLogLog
HyperLogLog is a unique items counter that trades accuracy for space. It tells you approximately how many distinct items it has seen, no matter how many times each one appeared. HyperLogLog sketch doesn't store the items, so it's much more compact than a regular set.
For example, a regular set of 1,000,000 distinct 8-byte strings takes about 64 MB. A HyperLogLog sketch counting the same strings with about 0.8% error uses only 16 KB — that's almost 4,000 times smaller. The size of the sketch doesn't depend on the number of items or their size, only on the accuracy you choose. A 16 KB sketch counts a billion items as accurately as a thousand.
HyperLogLog is useful when you need to count unique things in a large stream: unique visitors to a website, unique search queries per day, or distinct values in a database column. You can also merge sketches to gather data from multiple segments (like by hour, page, or region).
https://t.co/bjuduPdLlj
GoLand can now copy your run configurations and other `.idea` settings into new Git worktrees – no need to commit or recreate them.
Need ignored files like `.env` too? List them in `.worktreeinclude`, and add a setup script to install dependencies.
#NewInGoLand
O Reino Unido tomou medida similar e a audiência de sites pornográficos caíram em 75% sem aumento em outro país (que seria um sinal de migração para VPN). Os britânicos deixaram de consumir esse tipo de conteúdo?
Não, eles migraram para sites que não pertencem a empresas ou que são de empresas estrangeiras que não acatam a lei de verificação de idade. Agora o conteúdo adulto britânico está fora do alcance das autoridades, expondo seus cidadãos a mais revenge porn, a deepfakes e outros conteúdos ilegais sem remoção.
Antes o país dispunha de plataformas populares operada por empresas bem estabelecidas, que respondiam ofícios e ordens das autoridades. Agora o mesmo conteúdo está pulverizado pelas partes mais sombreadas da rede.
Toda política pública centrada em bloqueio na internet falhou e falhará. Há 25 anos o bloqueio tem sido usado no combate à pirataria e há 25 anos ele tem falhado. Verificação de idade para acesso a sites, apps e serviços é uma forma de bloqueio e desfrutará do mesmo insucesso.
Iniciativas como a desse projeto de lei que tendam acolchoar a internet para torná-la um lugar mais seguro na prática desprotegem crianças e adolescentes.
Precisamos do contrário: tornarmos a internet mais INsegura para crianças para justamente protegê-las. Explico em detalhes aqui: https://t.co/UgKlOEHJEi
You used to fit an entire operating system in 16KB of RAM, and today my Node.js project just downloaded 300MB of dependencies to center a div.
I apologize on behalf of modern web development.
Um data center no Brasil consome anualmente menos água do que uma piscina olímpica gasta por ano, não há ruído audível para quem mora e trabalha no entorno dele, no oposto que é dito eles REDUZEM a tarifa de energia elétrica para o consumidor residencial em vez de aumentar.
Cada data center gera 12 mil empregos durante a construção e de forma permanente após a conclusão dela, 1.800 empregos. Cada data center induz na economia o total de 37 mil empregos de acordo com a FGV.
Falo de tudo disso nessa entrevista ao Estadão: https://t.co/riKjEEzPIA
As engineers, we usually want exact answers from our data. However, sometimes it's worth giving up a little accuracy to save a lot of memory.
That's where probabilistic data structures come in:
— Bloom filter checks if an item might be in a set.
— Count-min sketch estimates how many times each item has occurred.
— HyperLogLog estimates the number of distinct items.
— T-digest estimates quantiles of a stream of numbers.
— Top-k sketch identifies the most frequent items in a stream.
I implemented these data structures in Go:
https://t.co/wSUvBYcdGl
Os gastos públicos de 2024 e 2025 somados produtos tecnológicos estrangeiros superou o montante de R$10 bilhões. Esse dinheiro dá e sobra para o uso de softwares livres (de código aberto) com suporte, garantia e costumização por empresas brasileiras.
Um bom ponto de partida, deputada, seria o SEPRO parar de chamar de "Nuvem Soberana" o produto que eles montaram usando softwares da AWS, Google, Oracle e Huawei sem licitação e em contratos sigilosos.
E de fato o governo federal abrir licitações para esses serviços que possam ser fornecidos por empresas brasileiras.
Recomendo a leitura aqui: https://t.co/GvRx3sYOsP