J'ai installé une base Clickhouse sur ma machine principale et j'ai positionné l'espace disque sur la nouvelle carte et ses "disques" NVME en RAID 1.
J'ai chargé la table principale de NTOPNG (plus de 766 millions de rangs) et comme premier test j'ai effectué cette statistique sur le port 23, il y en a encore qui tentent ce port ... Comme d'habitude avec Clickhouse le résultat est presque instantané :
60 rows in set. Elapsed: 1.295 sec. Processed 545.39 million rows, 4.86 GB (421.31 million rows/s., 3.76 GB/s.)
Peak memory usage: 8.07 MiB.
Qui a dit que traiter de gros volumes de données c'était long, ici environ 420 millions de rangs sur un total de 768 millions.
J'ai généré avec Openoffice le graphe qui suit :
Note : le "Peak memory usage" est ici assez faible et "passe" très bien sur les 32Gb de la machine, mais j'ai eu quelques ordres SQL incluant de très gros count(distinct(xxx)) sur cette même base tombent car pas assez de mémoire ...
A titre indicatif la description de la carte utilisée est accessible ICI.