Gedanken vom Admin
Hallo Leute, wie manche schon gemerkt haben, hat die "Zwenkauer Flaschenpost" in den letzten Wochen ein bisschen gehinkt. Gestern habe ich Apassungen mit Hilfe von "Claude" vorgenommen. Dabei hat es die DB bis zu 800 % ausgelastet. Und irgendwnn ist das ganze total abgestürzt. Die VM ist sogar so schlimm abgestürzt, dass sie nicht mehr bootete. Ursache war dann ein zerstörter MBR.
Mit Hilfe von Claude konnte ich die OS-Platte aus dem SnapShot klonen und einbinden und es bootete wieder. @Malte Friendica das war der Moment wo du das "Bad Gateway" gesehen hast.
Hauptursache für die ursächliche Problem waren zu wenige PHP-Prozesse. Das war relativ schnell gelöst (ich habe es in einem früheren Post beschrieben).
Im weiteren Verlauf habe ich dann Claude gebeten weitere Optimierungen vorzuschlagen. Die DB war inzwischen ca. 85 GB groß. Auch dadurch (weil der DB-Server nicht mehr die ganze DB im RAM halten konnte) war die "Zwenkauer Flaschenpost" langsam geworden.
Die KI hat dann mit unglaublichen SQL-Statements (die ich so noch nie gesehen hatte) die DB analysiert und viele Probleme erkannt. Zum einen hatte ich in der DB noch Daten aus den vergangenen Jahren, wo irgendwelche Idioten die Friendica-DBs mit falschen Subdomains "vergiftet" hatten. Das waren die ersten 10 GB.
Im weiteren Verlauf hat die KI gemerkt, dass ich keinen "Verfall" von alten Nachrichten eingestellt hatte.
Ich habe nun einen globalen Nachrichtenablauf von 190 Tagen eingerichtet. In der Nacht werden nun über die kommenden Tage und Wochen die Nachrichten älter als 190 Tagen gelöscht. Das sollte, nach Berechnung, ca. weitere 25 GB Einsparung bringen.
Keine Ahnung warum ich keinen Nachrichtenverfall eingerichtet habe; waren doch nur Textdaten - die sich gut komprimieren lassen. Schlechte Idee ! Naja, nun ist ein Nachrichtenverfall von 190 Tagen eingestellt; das sollte reichen.
Ziel ist es, in den kommenden Tagen eine DG-Größe zu erreichen, damit die DB wieder in den RAM passt.
Fazit: die Haupt-Optimierungs-Arbeiten sollten nun abgeschlossen sein. Die "Zwenkauer Flaschenpost" ist nun wieder bereit ihren Dienst für Öffentlichkeit.
So intensiv wie in der letzten Nacht (das ging bis nach Mitternacht) habe ich noch nie mit einer KI zusammen gearbeitet. Ich bin platt. Das "Wissensniveau" dieser KI ist großartig. Vor allem die SQL-Statements hätte ich nie so hinbekommen. Es galt schließlich, ca. 85 Mio. Zeilen DB zu löschen.
mögen das
teilten dies erneut
Matthias (feb)
Als Antwort auf Andreas vom Zwenkauer See • • •@Andreas vom Zwenkauer See
Gute Besserung dem Server ;) Und dir jetzt ein wenig Ruhe! Genieße den Rest des Tages.
@Malte Friendica
mögen das
Andreas vom Zwenkauer See und Malte Friendica mögen das.
Tuxi ⁂
Als Antwort auf Andreas vom Zwenkauer See • • •@Andreas vom Zwenkauer See
Die KI hat mir diese Tage auch bei einem Problem geholfen. Bei aller durchaus berechtigten Kritik ist es halt leider schon so, dass die KI den Suchmaschinen um Welten voraus ist.
@Malte Friendica
Malte Friendica mag das.
Hamiller Friendica
Als Antwort auf Tuxi ⁂ • • •@Tuxi ⁂ Sprachmodelle haben in dem Fall halt den Vorteil, dass sie praktisch alle erreichbaren FAQs und Howtos zu solchen Themen verdaut haben und bei passenden Fragen wiederkäuen können. 😉
/cc @Andreas vom Zwenkauer See @Malte Friendica
mögen das
Raroun und Malte Friendica mögen das.
Tuxi ⁂
Als Antwort auf Hamiller Friendica • • •@Hamiller Friendica
Richtig.
@Andreas vom Zwenkauer See @Malte Friendica
Hamiller Friendica mag das.
Dieter Fröhling
Als Antwort auf Andreas vom Zwenkauer See • • •@Andreas vom Zwenkauer See @Malte Friendica Rein subjektiv für mich eine Meldung wo ich merke KI könne sinnvoll sein. (Recherche und ausprobieren dauert, statt Wissen anwenden)
Bei der Fotografie sehe ich viel Werbung der Sorte "Verblödung sehr einfach" was alles die KI mir abnehmen solle. Ja sicher.
Was mich sehr skeptisch gegenüber dem Einsatz oder gar ein monatliches Abo macht.
Malte Friendica mag das.
Rainer "friendica" Sokoll
Als Antwort auf Andreas vom Zwenkauer See • • •Wieso das denn? Das ist doch kein SAP HANA.
Thorsten
Als Antwort auf Andreas vom Zwenkauer See • • •@Andreas vom Zwenkauer See Mir hat die KI in den letzten Tagen bei dem Umzug meiner Hubzilla-Instanz auf einen neuen Heimserver geholfen, inkl. Umzug des Datenbankservers und der Datenbanken. Ich war sehr erstaunt, wie gewissenhaft und vorsichtig die KI dabei vorgegangen ist. Bevor irgendwas kaputt gehen konnte wurde alles doppelt und dreifach gecheckt (wieso ist die DB auf dem neuen Server auf einmal nur noch halb so groß ...).
Meine Erfahrung: trotz allem immer kritisch lesen oder hinterfragen, was gerade als nächstes passieren soll. Aber man kann auch wirklich eine Menge dabei lernen, Ideen diskutieren usw.
Als nächstes werde ich mal mein Backup-Konzept überprüfen lassen :slightly_smiling_face:
mögen das
Malte Friendica, Andreas vom Zwenkauer See, Tuxi ⁂ und utzer mögen das.
utzer hat dies geteilt.