home.social

#fnordon — Public Fediverse posts

Live and recent posts from across the Fediverse tagged #fnordon, aggregated by home.social.

fetched live
  1. Grrr, jetzt schlägt der cluster-autoscaler fehl, weil #Hetzner keine VMs mehr hat. Deshalb war #Fnordon gerade fünf Minuten weg.

    #Mastoadmin

  2. Wegen der großen Menge an #Spam-Registrierungen ist die Neuanmeldung jetzt geschlossen. Wer schon ein #Fnordon-Konto hat, kann weiterhin Leute einladen. Ansonsten bitte ich Interessierte, sich bei mir per Mail (siehe "Über"-Seite) zu melden.

    #Mastoadmin

  3. Das wäre toll, wenn sich auch nur annähernd so viele Menschen neu bei #Fnordon anmelden wollten wie KI-Spambots.

  4. Neue Variante: die Bots klauen einfach den "Über mich"-Eintrag eines existieren Kontos. Hier versucht es zum Beispiel einer mit geklautem Text von @RAlpenstern:

    #Fnordon #Mastoadmin

  5. So ein Mist, die mutmaßlich KI-generierten Begründungen in den Spam-Beitrittsgesuchen werden immer besser. Die klingen inzwischen so plausibel, dass die Bots fast nur noch an den IP-Adressen (und eventuell Mailadressen) zu erkennen sind.
    Wenn das so weiter geht, dann muss ich die Anmeldung bald auf nur-per-Einladung umstellen.

    #Fnordon #Mastoadmin

  6. Ich kämpfe im Moment auf dem Produktions-Cluster mit http-Gateway-Timeout-Fehlern und kann sie noch nicht so richtig verorten.

    Davon ist auch (aber nicht nur) #Fnordon betroffen. Es könnten also manchmal Dinge etwas langsamer laden, oder erst beim zweiten Versuch.

    #Mastoadmin

  7. Im Moment sehe ich auf #Fnordon eigenartig viele Registrierungsanfragen, alle mit recht generischen Begründungstexten und meistens von Tor-Exit-Nodes.

    #Mastoadmin

  8. Wieder da.

    Das war jetzt bizarr: sowohl bei #Fnordon als auch bei #Stuttgartsocial war der #Redis hängen geblieben und ließ sich nicht wieder starten. Und zwar sowohl auf den Test- als auch auf den Produktionsclustern zur gleichen Zeit.

    #Mastoadmin

  9. Ich musste jetzt bei #SeaweedFS die Notbremse ziehen: die #Fnordon-Medien sind zu #Hetzner Object Storage umgezogen. Da habe ich weniger Kontrolle über die Daten, und es ist auch nur so halb selbst gehostet, aber plötzlich sind durch's Rüberkopieren aus 3 TB nur 600 GB geworden, und ich habe weniger KubePersistentVolumeFillingUp-Alarme.

    #Mastoadmin

  10. Kurze Anmerkung zum #ESC aus dem #Fnordon-Maschinenraum: das ist wie jedes Jahr bisher der Abend mit der höchsten Server-Belastung. Heute waren wir aber noch nicht länger als 54,3 Sekunden hinter der föderierten Timeline, und wir haben nicht einmal bis zur maximalen Anzahl von Sidekiq-Servern hochskaliert.

    #Mastoadmin

  11. Mit #SeaweedFS werde ich nicht glücklich, weil ich nicht verstehe, wie ich das Ding dazu bringe, den Platz von gelöschten Dateien wieder freizugeben.

    Im Moment benötigen die ungefähr 450 GB Objekte von #Fnordon (größtenteils Cache der Medien anderer Server) insgesamt 2 TB Plattenplatz, Tendenz ständig steigend.

    Irgendwas mache ich doch falsch.

    #Mastoadmin

  12. Die Fehler in #Sidekiq nehmen langsam zu, wir verlieren den Kontakt zu den anderen .de-Instanzen.

    #Mastoadmin #Fnordon #DNSSEC #DEFAIL

  13. Achtung #Fnordon, jetzt rumpelt's gleich kurz.

    Ich schalte den Object Storage von #MinIO auf #SeaweedFS um. Dadurch könnten vorübergehend Medien (Bilder/Videos) fehlen, die kommen aber alle wieder.

    #Mastoadmin

  14. Heute habe ich eigenartige Lastspitzen bei den Zugriffen auf #Fnordon. Ich habe jetzt mal die web-Komponente hochskaliert, weil ich schon Alarme bekommen habe, dass meine Service Level Objectives nicht eingehalten werden.

    #Mastoadmin #k8s #Pyrra #SLO

  15. Und schon 5 Monate und 20 Tage später sind wir bei Nummer 750. Das waren in der Zeit durchschnittlich 1,4 Meldungen pro Tag – die meisten davon aber in großen Spamwellen, so dass es nach wie vor fast immer entspannt zu bewältigen ist.

    #Mastoadmin #Fnordon

  16. Heute ist übrigens Fnordons siebter "Geburtstag". Häppy #Fnordon, schön dass ihr alle da seid! :sticker_dancingelephant:

  17. RE: fnordon.de/@admin/115503207816

    Mastodon Version 4.5.0 ist installiert, die erste Version, die Quote Posts (Quoots? Zitröte?) unterstützt.

    Dies dürfte also der erste zitierte Tröt auf #Fnordon sein:

  18. Tja, so ist das eben mit Rechenzentren. #Fnordon läuft zum Beispiel prima ohne Amazons us-east-1, aber sollte Hetzners fsn1 mal down sein, dann sind wir auch weg.

  19. Uuups, #hetzner hatte einen kurzen Schluckauf bei den Block Volumes, und dadurch war die Datenbank von #Fnordon mal kurz weg.

    #Mastoadmin

  20. Leider musste ich die Domains gup.pe (und a.gup.pe) sperren, weil der bisherige Betreiber sie verloren hat (Notiz an mich selbst: keine .pe-Domains benutzen).

    github.com/immers-space/guppe/

    #guppe #Fnordon #Mastoadmin

  21. Ich habe die Instanz mastodon.cloud stummgeschaltet. Ihr seht deren Posts jetzt nur noch, wenn Ihr den jeweiligen Konten folgt, und Konten von dort müssen Folgeanfragen stellen, auch wenn Ihr das sonst abgeschaltet habt.

    Der Grund dafür ist, dass es dort aktuell keine funktionierende Moderation zu geben scheint: social.growyourown.services/@F

    #Mastoadmin #Fnordon

  22. Tataa! Das war gerade die 500. Meldung seit dem Start von #Fnordon am 26. November 2018. Im Durchschnitt ist das etwa eine alle fünf Tage, das ist zu bewältigen.

    #Mastoadmin

  23. … und als dann der Loadbalancer wieder lief, da hat #kured die Mastodon-Datenbank auf einen anderen Node geschoben. Manchmal kommt eins zum anderen.

    #Mastoadmin #Fnordon #k8s

  24. Uuups, alles war kurz down*, weil sich der #Hetzner-Loadbalancer verschluckt hatte.

    *) also eigentlich nicht wirklich down, aber aus dem Internet unerrreichbar

    #Fnordon #Mastoadmin

  25. Wir waren übrigens bisher höchstens 39.6 Sekunden hinter der globalen Timeline. Ihr müsst schon mehr #ESC-Tröts schreiben, um den Server in die Knie zu zwingen.

    #Mastoadmin #Fnordon

  26. Na gut, dann sind die Mails von #Fnordon eben #Spam bei #Domainfactory. Wenn Ihr nicht mehr Informationen liefert, dann kann ich da auch nichts machen. 🤷‍♂️

  27. Ah, #kured marodiert gerade durch den cluster, drum war die Datenbank kurz weg.

    #Mastoadmin #Fnordon

  28. Ich habe letzte Woche mit #FediBuzz Relays* rumgespielt und testweise den Tatort-Hashtag mit Fnordon "abonniert". Das hat gestern schon ganz gut funktioniert, und ich hatte deutlich mehr Posts in der Timeline.

    Jetzt frage ich mich: für welche Hashtags würdet Ihr Euch das auch wünschen?

    *) relay.fedi.buzz

    #Fnordon #Mastoadmin