vutuv
Log in

Post by Stefan Wintermeyer

Alvar Freude @alvar freude.social

Werfe einen Blick in das PostgrSQL-Log. In dem werden auch long-running-Queries protokolliert. Und was sehe ich da? #Mastodon macht:

SELECT “tags”.* FROM “tags” WHERE “tags”.”id” IN ($1, $2, $3, $4, $5, $6, $7, $8, $9, $10, […] $5272, $5273, $5274) AND “tags”.”id” > $5275 ORDER BY “tags”.”id” ASC LIMIT $5276

Heiliger Bimbam, 5276 Bind-Parameter. Wer baut sowas … – sieht nach irgendeinem gammeligem ORM aus.
Ja, natürlich sind Bind-Parameter richtig und korrekt. Aber doch nicht über 5000!

Die kommen doch garantiert auch aus der DB. SQL kann sowas wie:

SELECT * FROM tags WHERE id IN (SELET tag_id FROM <wasauchimmer> WHERE <bedingung>) AND id > $1 ORDER BY id ASC LIMIT $2;

Allerdings riecht “id > $x” irgendwie auch nach einem schlechten Datenbank-Modell.

Stefan Wintermeyer

AFAIK ist Mastodon im Kern eine Ruby on Rails Applikation. Das ORM wäre dann ActiveRecord. Eigentlich ist ActiveRecord nicht schlecht und generiert auch brauchbares SQL. Aber es kann natürlich nicht suboptimale Programmierung ausbügeln. Das hier ist kein Framework oder ORM Problem. Da hat jemand beim Programmieren nicht bis ans Ende gedacht.

Schaue Dir mal die abuuba.com Benchmark Vergleichswerte an. Bei Mastodon gibt es noch viel Optimierungspotential.

sql Mastodon ActiveRecord Geschwindigkeit performance
sql Mastodon ActiveRecord Geschwindigkeit performance
3
From other networks 1

1 reply

Already counted in the numbers above.

René Oelke

@wintermeyer Eines der Optimierungspotentiale scheint wohl auch Storage und Caching zu sein. Ist das in abuuba anders oder sogar besser gelöst?

1

Replying to @reneoelke

Stefan Wintermeyer

Ich bin ja ein großer Fan vom Caching. Aber Caching funktioniert nur richtig gut, wenn die Grundlagen dahinter sauber geplant und programmiert wurden.

Mastodon hat diesbezüglich Raum für Verbesserungen.

abuuba hat es aber auch einfacher. Es ist immer einfacher Fehler anderer zu sehen und diese dann nicht zu wiederholen, als selbst auch von Null anzufangen.

Mastodon abuuba
Alvar Freude @alvar

@wintermeyer ja, mastodon ist Ruby on Rails. Welches ORM verwendet wird weiß ich nicht.

In Sachen SQL ist „siboptimale Programmierung“ leider Standard. Sehe ich sehr sehr häufig. Habe früher als Freiberufler u.a. PostgreSQL Performance-Tuning gemacht. Oft wurden noch nicht mal die Grundlagen beherrscht.

From another network · freude.social · View the original

Replying to @wintermeyer

Stefan Wintermeyer

Ja, das kenne ich aus meinem beruflichen Alltag auch nur zu gut. Es mangelt oft an den Grundlagen. Wenn dann noch eine “Schicht” Caching drüber gelegt wird, dann wundert sich jeder, warum bei jeder zweiten Abfrage falsche Ergebnisse rauskommen.

sql

Other formats

Markdown Text only JSON XML