#anoxinon — Public Fediverse posts
Live and recent posts from across the Fediverse tagged #anoxinon, aggregated by home.social.
-
Es ist Vollbracht, die #SideKiq Queues von #Mastodon sind alle leer.
Wir ( #Anoxinon ) sind damit wieder UpToDate und jetzt wo der Server aufgeholt hat, ist die IO auch deutlich gesunken.
Die Nachwirkungen des Recovers sind damit durch. Natürlich gibt es aber noch so einige weitere Dinge wie Dokumentation Optimieren, Auf räum Arbeiten usw. -
Es ist Vollbracht, die #SideKiq Queues von #Mastodon sind alle leer.
Wir ( #Anoxinon ) sind damit wieder UpToDate und jetzt wo der Server aufgeholt hat, ist die IO auch deutlich gesunken.
Die Nachwirkungen des Recovers sind damit durch. Natürlich gibt es aber noch so einige weitere Dinge wie Dokumentation Optimieren, Auf räum Arbeiten usw. -
So damit sind alle Queues bis auf `default` leer; Diese hat noch 245.750, wird aber jetzt gut abgebaut.
Die Doppelten Einträge in `preview_cards` scheinen aber auch noch mal sehr relevant zu sein, dessen löschen scheint die DB ausgesprochen zu entlasten. -
So damit sind alle Queues bis auf `default` leer; Diese hat noch 245.750, wird aber jetzt gut abgebaut.
Die Doppelten Einträge in `preview_cards` scheinen aber auch noch mal sehr relevant zu sein, dessen löschen scheint die DB ausgesprochen zu entlasten. -
Was man nicht alles so findet beim Debugen von Slow Querys in eine DB. Irgendwie hat es `CREATE UNIQUE INDEX CONCURRENTLY index_preview_cards_on_url ON preview_cards USING btree (url);` nie in unsere #Mastodon Instanz geschafft, daher wir in der Tabelle eben fast immer 3 Duplikate je URL haben.
-
Was man nicht alles so findet beim Debugen von Slow Querys in eine DB. Irgendwie hat es `CREATE UNIQUE INDEX CONCURRENTLY index_preview_cards_on_url ON preview_cards USING btree (url);` nie in unsere #Mastodon Instanz geschafft, daher wir in der Tabelle eben fast immer 3 Duplikate je URL haben.
-
So ingress ist bei 0. \o/.
Pull ist noch bei `550.186` und Default bei `868.597`.
Pull Baut sich auch ab, aber Default braucht hat noch ne leichte Tendenz nach oben.
50 CPU Thread sind weiterhin auf Anschlag durch Postgress und ein Teil der Daten wird ja nach HDD geschrieben, bspw. die Cache Daten. Da dahin gerade noch der Dump Import nach Postgres 18 läuft, liegt hier eventuell ein limitierender Faktor.
Schauen wir mal wie es wird, wenn die last vom Pull weg ist. -
Ich habe dann mal wieder ein #SideKiq Queue splitt umgesetzt wie wir es schon mal bei #Mstodon eingesetzt haben. Siehe hier: https://codeberg.org/Anoxinon_e.V./mastodon_sidekiq
Der Server ist dadurch auf jeden Fall ein Wenig mehr beschäftigt als ohne den Splitt. -
Liebes #Fediverse und vor allem liebe #mastoadmin Gruppe. Wie ist euer aktueller Stand zu #SideKiq und deren Worker und Queues. Früher hatte man die ja auf ggf. mehrere laufende #SystemD Units aufgeteilt, ich meine aber das dies nicht mehr aktuell ist und keinen Vorteil bringen sollte. Aktuell sieht es bei uns halt wie folgt aus und ich frage, mich warum ich ihn nicht dazu bekomme mehr zu machen.
DB_POOL:140
worker: 128queues:
default, 20
push, 9
ingress, 30
mailers, 3Tipps?
-
Liebes #Fediverse und vor allem liebe #mastoadmin Gruppe. Wie ist euer aktueller Stand zu #SideKiq und deren Worker und Queues. Früher hatte man die ja auf ggf. mehrere laufende #SystemD Units aufgeteilt, ich meine aber das dies nicht mehr aktuell ist und keinen Vorteil bringen sollte. Aktuell sieht es bei uns halt wie folgt aus und ich frage, mich warum ich ihn nicht dazu bekomme mehr zu machen.
DB_POOL:140
worker: 128queues:
default, 20
push, 9
ingress, 30
mailers, 3Tipps?
-
So die Ingess Queue ist auf `180464` runter.
#Anoxinon #Mastodon #SideKiq #Fediverse #Restore -
So die Ingess Queue ist auf `180464` runter.
#Anoxinon #Mastodon #SideKiq #Fediverse #Restore -
#FotoVorschlag
Seit der kurzen Pause von #anoxinon scheint hier ein ganz schönes Durcheinander zu sein. Drei bis vier Themen, welche an einem Tag am laufen sind, ohne die zusätzlichen Vorschläge, die nicht von @FotoVorschlag stammen. Da halte ich mich dann eher raus 😎 -
#FotoVorschlag
Seit der kurzen Pause von #anoxinon scheint hier ein ganz schönes Durcheinander zu sein. Drei bis vier Themen, welche an einem Tag am laufen sind, ohne die zusätzlichen Vorschläge, die nicht von @FotoVorschlag stammen. Da halte ich mich dann eher raus 😎 -
So wir sind beim Ingress auf 435205
runter, da waren wir gestern 22 Uhr noch bei 646782.Man merkt der jetzigen Hardware an das diese durch ihren ausreichenden RAM aber nicht so performanten SSDs (Bei #Hetzner liefen wir noch auch NVME), ganz andere Leistungsmerkmale beim Queue Abbau entwickelt.
Der Abbau der Queue war vorher deutlich schwankender, jetzt ist er sehr Konstant in seinen Geschwindigkeiten. -
So wir sind beim Ingress auf 435205
runter, da waren wir gestern 22 Uhr noch bei 646782.Man merkt der jetzigen Hardware an das diese durch ihren ausreichenden RAM aber nicht so performanten SSDs (Bei #Hetzner liefen wir noch auch NVME), ganz andere Leistungsmerkmale beim Queue Abbau entwickelt.
Der Abbau der Queue war vorher deutlich schwankender, jetzt ist er sehr Konstant in seinen Geschwindigkeiten. -
So das #PostgreSQL update auf 18 von 15 für die #Anoxinon instanz kommt heute nicht mehr dran. Den Dump zu erzeugen dauer langer. Daher wird es morgen erst mal ein `pg_repacker` geben.
Aber die Leistung ist jetzt so, das er die Queue wieder langsam abgebaut bekommt.
Mal sehen wie weit er über die Nacht kommen wird. -
So kurzes Update zu #Anoxinon und der #Mastodon Instanz unter https://social.anoxinon.de. <(Ich mag es, das hier ein Punkt in jeglicher Hinsicht richtig ist. ^^ )
Die #PostgreSQL DB liegt nun wieder auf SSD, was man auch deutlich merkt. Wir haben einiges an Stage Systemen unter https://stage.anoxinon.de dafür jetzt auf HDD verband; Da könnte es also zäher reagieren.
[1/2] -
So kurzes Update zu #Anoxinon und der #Mastodon Instanz unter https://social.anoxinon.de. <(Ich mag es, das hier ein Punkt in jeglicher Hinsicht richtig ist. ^^ )
Die #PostgreSQL DB liegt nun wieder auf SSD, was man auch deutlich merkt. Wir haben einiges an Stage Systemen unter https://stage.anoxinon.de dafür jetzt auf HDD verband; Da könnte es also zäher reagieren.
[1/2] -
Der #Verein #Anoxinon braucht eure Hilfe
#Anoxinon bietet euch eine beliebte #Mastodon-Instanz an. Leider kam es in der letzten Woche zu einem Hardware-Ausfall. Jetzt könnt ihr dem Verein helfen und damit das #Fediverse stärken.
-
Der #Verein #Anoxinon braucht eure Hilfe
#Anoxinon bietet euch eine beliebte #Mastodon-Instanz an. Leider kam es in der letzten Woche zu einem Hardware-Ausfall. Jetzt könnt ihr dem Verein helfen und damit das #Fediverse stärken.
-
Nach und nach werden mir die Morgen- und Abendgrüße
der letzten 4 Tage etwas durcheinander in meine TL gespült.
Insgesamt fehlen noch viele, viele Stunden.
Auf meinen Morgenpost habe ich noch keine Antwort lesen können, obwohl ich von anderen weiß, dass Antworten da sind.
Also übe ich mich mit anderen weiter in Geduld und drücke die Daumen, dass die Instandsetzung von #Anoxinon erfolgreich abgeschlossen werden kann.
Habt einen schönen #Abend, ihr Lieben, und später eine gute #Nacht! 😊💫✨ -
Nach und nach werden mir die Morgen- und Abendgrüße
der letzten 4 Tage etwas durcheinander in meine TL gespült.
Insgesamt fehlen noch viele, viele Stunden.
Auf meinen Morgenpost habe ich noch keine Antwort lesen können, obwohl ich von anderen weiß, dass Antworten da sind.
Also übe ich mich mit anderen weiter in Geduld und drücke die Daumen, dass die Instandsetzung von #Anoxinon erfolgreich abgeschlossen werden kann.
Habt einen schönen #Abend, ihr Lieben, und später eine gute #Nacht! 😊💫✨ -
-
I'm happy that #Anoxinon is back and that they found a more recent database dump for their disaster recovery.
Some of the people I followed showed up again on other instances too meanwhile. This is good.
Some I searched for myself I couldn't find though. This includes checking their profiles for links to their primary sources. Worst case? That contact would be gone now.
This is what happens when a 3rd party is your identity provider.
We can fix that: Get a domain!
-
I'm happy that #Anoxinon is back and that they found a more recent database dump for their disaster recovery.
Some of the people I followed showed up again on other instances too meanwhile. This is good.
Some I searched for myself I couldn't find though. This includes checking their profiles for links to their primary sources. Worst case? That contact would be gone now.
This is what happens when a 3rd party is your identity provider.
We can fix that: Get a domain!
-
Dann tauchen wir hier
auf Anoxinon
mal langsam alle wieder auf,
auch wenn einige Tage
vermutlich verschütt
und nicht nachlesbar sind.
Hauptsache, wir haben
heute den vollen Durchblick
und das auch in der neuen Woche.Danke für die viele Mühe, die hinter dem Instandsetzen steckt! 🙏
Habt einen schönen Tag, ihr Lieben, 🧡
und einen guten Start in die neue Woche mit wundervollen Momenten und Begegnungen! ☀️#Montag #Wochenstart #gutenMorgen #Anoxinon #Batman #DogsofMastodon
-
Dann tauchen wir hier
auf Anoxinon
mal langsam alle wieder auf,
auch wenn einige Tage
vermutlich verschütt
und nicht nachlesbar sind.
Hauptsache, wir haben
heute den vollen Durchblick
und das auch in der neuen Woche.Danke für die viele Mühe, die hinter dem Instandsetzen steckt! 🙏
Habt einen schönen Tag, ihr Lieben, 🧡
und einen guten Start in die neue Woche mit wundervollen Momenten und Begegnungen! ☀️#Montag #Wochenstart #gutenMorgen #Anoxinon #Batman #DogsofMastodon
-
Der Verein Anoxinon braucht eure Hilfe
Anoxinon bietet euch eine beliebte Mastodon-Instanz an. Leider kam es in der letzten Woche zu einem Hardware-Ausfall. Jetzt könnt ihr dem Verein helfen und damit das Fediverse stärken.
#Anoxinon #Fediverse #Spenden #Unterstützung #mastodon #Linux
-
Der Verein Anoxinon braucht eure Hilfe
Anoxinon bietet euch eine beliebte Mastodon-Instanz an. Leider kam es in der letzten Woche zu einem Hardware-Ausfall. Jetzt könnt ihr dem Verein helfen und damit das Fediverse stärken.
#Anoxinon #Fediverse #Spenden #Unterstützung #mastodon #Linux
-
Die Instanz ist wieder da! 🎉
Unser früherer Admin @Muto konnte es fixen. Dass BorgMatic Postgres nicht sichert war eine bewusste Entscheidung – ein Filesystem-Backup einer laufenden DB ist ohnehin nicht konsistent. Es gab andere Backup-Wege, die undokumentiert mit Personalwechsel verschüttet wurden.
Danke an @YoSiJo und @Muto, die das heute gemeinsam gelöst haben! 🙏
Die Admins sind nach einer langen Nachtschicht schlafen gegangen. Ein ausführliches Update folgt. -
Die Instanz ist wieder da! 🎉
Unser früherer Admin @Muto konnte es fixen. Dass BorgMatic Postgres nicht sichert war eine bewusste Entscheidung – ein Filesystem-Backup einer laufenden DB ist ohnehin nicht konsistent. Es gab andere Backup-Wege, die undokumentiert mit Personalwechsel verschüttet wurden.
Danke an @YoSiJo und @Muto, die das heute gemeinsam gelöst haben! 🙏
Die Admins sind nach einer langen Nachtschicht schlafen gegangen. Ein ausführliches Update folgt. -
Hurra! Anoxinon ist wieder da !
Ich danke allen von Anoxinon.ev, die das ermöglicht haben und wünsche alles Gute für die weitere Arbeit!
Das war geschehen:
https://linuxnews.de/in-eigener-sache-unsere-mastodon-praesenz-und-ein-angebot/
-
Hurra! Anoxinon ist wieder da !
Ich danke allen von Anoxinon.ev, die das ermöglicht haben und wünsche alles Gute für die weitere Arbeit!
Das war geschehen:
https://linuxnews.de/in-eigener-sache-unsere-mastodon-praesenz-und-ein-angebot/
-
Ich mache immer schön artig eine #Immich Datensicherung, u.A. synchronisiere ich immer das Bilderverzeichnis aus Immich auf mein #MacBook und gucke dann da mit #DigiKam mal rein (hab ich vor Immich benutzt). Etwas Sorge bereitet mir das #Backup der Immich #Datenbank, weil ich nicht weiß, wie ich das auf Korrektheit prüfen kann. Und wir haben ja gerade gelernt, was passiert, wenn man alles sichert bis auf die Datenbank. ( #anoxinon )
-
Ich mache immer schön artig eine #Immich Datensicherung, u.A. synchronisiere ich immer das Bilderverzeichnis aus Immich auf mein #MacBook und gucke dann da mit #DigiKam mal rein (hab ich vor Immich benutzt). Etwas Sorge bereitet mir das #Backup der Immich #Datenbank, weil ich nicht weiß, wie ich das auf Korrektheit prüfen kann. Und wir haben ja gerade gelernt, was passiert, wenn man alles sichert bis auf die Datenbank. ( #anoxinon )
-
Verwendungszweck: "Kein Backup, keine Gnade"
Update: Datenrettung für social.anoxinon.de beschlossen
https://anoxinon.de/blog/mastodon_datenrettung_update_2026-08-02/
-
Verwendungszweck: "Kein Backup, keine Gnade"
Update: Datenrettung für social.anoxinon.de beschlossen
https://anoxinon.de/blog/mastodon_datenrettung_update_2026-08-02/
-
Ephraims Wochenrückblick: KW 31, 2026
In der FOSS-Welt war in Woche 31 einiges los. Von CoMaps über Thunderbird Mobile und Piccolo bis zu Anoxinon
#Wochenrückblick #CoMaps #Thunderbird #Piccolo #Anoxinon #Linux
-
Ephraims Wochenrückblick: KW 31, 2026
In der FOSS-Welt war in Woche 31 einiges los. Von CoMaps über Thunderbird Mobile und Piccolo bis zu Anoxinon
#Wochenrückblick #CoMaps #Thunderbird #Piccolo #Anoxinon #Linux
-
Liebe Leser,
unsere #Mastodon-Instanz ist aktuell nicht erreichbar. Unser Account @linuxnews liegt beim #Anoxinon e.V.
Laut Statusseite fiel zunächst eine NVMe-SSD des Root-Servers aus. Kurz darauf traf es auch die zweite, sodass beide Root-NVMes zeitgleich ausgefallen sind...
https://linuxnews.de/in-eigener-sache-unsere-mastodon-praesenz-und-ein-angebot/ -
Liebe Leser,
unsere #Mastodon-Instanz ist aktuell nicht erreichbar. Unser Account @linuxnews liegt beim #Anoxinon e.V.
Laut Statusseite fiel zunächst eine NVMe-SSD des Root-Servers aus. Kurz darauf traf es auch die zweite, sodass beide Root-NVMes zeitgleich ausgefallen sind...
https://linuxnews.de/in-eigener-sache-unsere-mastodon-praesenz-und-ein-angebot/ -
Dem Verein Anoxinon ist ihre Mastodon-Instanz social.anoxinon.de abgeraucht.
Der unwahrscheinliche Fall ist nun doch eingetreten und _beide_ SSDs aus dem RAID-1 sind ihnen ausgestiegen.
Backups haben sie zwar, aber gerade die PostgreSQL Datenbank mit den für die Instanz so wichtigen Daten war im Backup nicht enthalten. Vermutlich wegen eines Fehlers.
Das ist hart.
Man hat nun einen Data Recovery Service engagiert, um die Daten von den NVMe SSDs doch noch zu retten.
https://anoxinon.de/blog/mastodon_ausfall_datenrettung_2026/
Das ist alles sehr bitter und kostenintensiv. Wenn ihr also ein paar € übrig habt - der (gemeinnnützige) Verein freut sich über Spenden!
-
Dem Verein Anoxinon ist ihre Mastodon-Instanz social.anoxinon.de abgeraucht.
Der unwahrscheinliche Fall ist nun doch eingetreten und _beide_ SSDs aus dem RAID-1 sind ihnen ausgestiegen.
Backups haben sie zwar, aber gerade die PostgreSQL Datenbank mit den für die Instanz so wichtigen Daten war im Backup nicht enthalten. Vermutlich wegen eines Fehlers.
Das ist hart.
Man hat nun einen Data Recovery Service engagiert, um die Daten von den NVMe SSDs doch noch zu retten.
https://anoxinon.de/blog/mastodon_ausfall_datenrettung_2026/
Das ist alles sehr bitter und kostenintensiv. Wenn ihr also ein paar € übrig habt - der (gemeinnnützige) Verein freut sich über Spenden!
-
@Codeberg @codebergstatus Anscheinend kann ich hier lange auf eine Antwort warten, da euer Mastodon Server wohl auch gerade weg ist. ^^
-
Update 20:39 Uhr: Blogbeitrag von Anoxinon. https://anoxinon.de/blog/mastodon_ausfall_datenrettung_2026/
Die Fediverse Instanz social.anoxinon.de ist down.
Es sind gleichzeitig 2 Festplatten abgeschmiert und mit dem Backup gibt es leider schwerwiegende Probleme. Kurzfristig wird es wohl leider keine Lösung geben. Es wird intensiv gearbeitet. Ohne kostspielige Datenrettung wird es aber voraussichtlich nicht gehen.
Ausführliche Infos folgen voraussichtlich als Blogbeitrag.
-
Kein Backup, kein Mitleid, so ging es mir heute leider. Die Mastodon Instanz von Anoxinon liegt aktuell im Koma und ich habe natürlich vergessen ein Folli-Backup zu machen. Nun muss ich mir mühsam von anderen Instanzen die Follower-Infos zusammensammeln. Dazu habe ich ein kleines Script gebaut: https://termbin.com/d8b97
python3 mastocurl.py followers @[email protected] mastodon.social follower-import.csv
python3 mastodoncurl.py following @[email protected] mastodon.social following-import.csvDas prüft auf der angegebenen Mastodon Instanz, hier mastodon.social, welche Follower- und Following-Informationen bekannt sind und erstellt daraus ein .csv, das ich dann im Mastodon in den Einstellungen importieren kann. Da die Instanzen jeweils einen sehr unterschiedlichen Informationsstand zu meinem Konto haben, ist das ein Prozess, den ich mehrfach wiederholen muss. Dabei sehe ich auch gut, wie gut die Instanzen federaten. Ich lerne daraus, dass auch ohne Migration ab und an ein CSV-Export aus Mastodon heraus durchaus sinnvoll sein kann. :BonziExplain:
-
Queer Inklusive Woche Berlin-Lichtenberg
(Unterstützt von Anoxinon e.V.)Save the date:
1.12.2026 bis 11.12.2026Brücken bauen: Gemeinsam für Menschenrechte und Inklusion
:sparkles_pride: ✨ :transsparkles:https://www.berlin.de/ba-lichtenberg/aktuelles/pressemitteilungen/2026/pressemitteilung.1690982.php