Follow

I am used to a huge postgresql database at work (billions of rows), so even a simple query can take hours on high-end hardware.

Here I just wrote a relatively complex SQL query for Mastodon, on a 30€/month server, and it finishes in seconds

:surprised_pikachu:

@wxcafe On stocke *tout* le code source, et avec les historiques de VCS. Genre on a tous les commits et directories (et chaque version de ceux-ci). On déduplique (merkle dag), mais ça fait quand même beaucoup

archive.softwareheritage.org/

En excluant le contenu des fichiers (qui est un problème à part entière), ça donne une bdd de 2TO, plus quelques TO d'indexes

@wxcafe Et c'est ma première expérience avec des bdd (à part quelques sqlites de quelques MO), donc ça fait bizarre quand je me mets à faire des requêtes à une bdd normale :p

@val wow

Déjà au boulot on trouve que 40s pour une requête c'est hyper long (bon en vrai on fait pas 1 seule requête et on passe par une blockchain donc sur une table de dizaine de milliers de rows ça tape un peu)

Sign in to participate in the conversation
Octodon

oc.todon.fr is an actively-moderated mostly French-speaking Mastodon instance. oc.todon.fr est une instance Mastodon principalement francophone et avec une modération active.