Willkommen |
|
myGully |
|
Links |
|
Forum |
|
|
|
20.10.09, 23:55
|
#1
|
Banned
Registriert seit: Oct 2009
Beiträge: 58
Bedankt: 86
|
Linksave.in Umstrukturierung
Zitat:
AKTUELLER STATUS
OFFLINE WARTUNG:
Die letzte Tabelle welche auf myisam lief, ist die Link Tabelle mit 13 Millionen Einträgen. Diese wird auf inodb umgestellt und weitere Optimierungen an dieser Tabelle wie auch entsprechenden Configs samt S*****en vollzogen. Dauer ca. 06.00-08.00. Angefangen haben wir um 02.00 Uhr.
Beim letzten Hoster Umzug vor einigen Monaten hatten wir diese Arbeit aufgeschoben da wir dachten V2 wird nicht nur schneller fertig, sondern Linksave.in gibt nun viele Monate ruhe, was nicht der Fall war/ ist. Zudem wollten wir die lange Offtime nach den vielen Problemen nicht erneut in Kauf nehmen, da wir ohnehin seinerzeit sehr viele User verloren haben.
Nun haben wir uns dazu entschieden auch diesen Punkt auch wenn dies eine lange Offtime bedeutet zu erledigen. Mit den Änderungen der Vergangenen Tage, wären dann die größten Offtimes hinter uns.
Es folgen weitere Tests, Optimierungen und mit unter Erneuerungen im Size, Status (cronjobs) Bereich.
Kurz um, Intern ein LS welches es nie zuvor gab. Statt Pflaster aufkleben, operieren wir nun endlich, da unser Team vollständig und Geistig der schweren Lage gewachsen ist. Dabei muss ich erwähnen das ca. 4-6 Coder vorher, Teilweise auch Beruflich dabei, Linksave.in die weiße Flagge gezeigt haben, denn das System ist sehr Komplex und es wurde versäumt bei Zeiten die Hebel an zu setzen.
Hi
wir sind wie versprochen nun sehr aktiv. Gestern wurden einige Themen besprochen und teils umgesetzt. Hier schreibe ich kurz und laienhaft für alle Verständlich was bereits erledigt wurde, geplante Offtimes und weiteres.
Hauptprobleme von Linksave.in sind das früher nicht Zukunftsorientiert coded wurde. Die besten Ideen sind zwar Toll und erfreuen uns alle, doch nach vielen Monaten nutzen laufen diese an Informationen voll (Beispiel 2,4 Millionen Einträge nur bei der Domain Stats (ausgenommen weitergehende Reffereal Stats).
Nach Rücksprache mit unserem neuen Coder welcher auf Problemlösungen spezialisiert ist auch Berufsseitig, mit Frank welcher das LS System etwas kennen gelernt hat, mit unseren geliebten Hoster welcher auch oft ausgeholfen hat und Erfahrung gewinnen konnte, wissen wir nun die Gründe und machen und Stück für Stück an die Arbeit unser aktuelles Linksave.in zu verbessern, Fehler zu beseitigen.
Wir legen sehr viel Wert darauf das wir kaum Downtimes haben, können diese jedoch bei der Fülle und Größe der Aufgaben nicht verhindern.
Jedoch werden wir diese nur in der Woche und von ab 02.00 Uhr bis ca. Maximal 11.00 Uhr wenn möglich legen.
Wir hoffen auf Euren Zuspruch und Feedback hier im Thema. Alle Änderungen arbeite ich in dieses erste post ein, so das jeder Informiert ist.
Schämen werde ich mich nicht für die Schreibweise, Erklärung, Zugabe das wir Fehler haben.
Was wir tun, ist es Verbessern, endlich nach den ganzen Anfängen im Februar (Offtimes) ist dies nicht nur nötig sondern soll jedem zeigen das er bei Linksave.in weiterhin gut aufgehoben ist, sogar besser als in der Vergangenheit.
Gewährt uns daher bitte einige Änderungen und Ausfallzeiten wie erwähnt.
Vielen Dank!
Erledigt wurde:
1. Umschreiben der Werbeaufrufe/ IP Zuordnung Country
Die Anzahl gleichzeitiger Verbindungen ist von 1600 auf 125 runter und die Load vom Mysql Server von 6 auf 3 und die CPU Belastung von 400% auf 50 bis 150
Einer der Hauptgründe wenn nicht sogar der Hauptgrund, wieso die Seite kurzzeitig immer wieder Down ging, da Sie "vollgelaufen ist"
2. Rapidshare.com Redirect gefixt. Langsamer Aufruf bei Offline Daten liegt bewiesenermaßen bei RS direkt. Siehe hier
3. Sharebase.to gefxit. siehe hier
4. Einige Punkte zusammengefasst (Zitat Coder)
Code: Alles auswählen
Tabelle user_referer
Neuer Primärer Index auf id/monat/referer/type
Feld referer von 400 auf 255 Zeichen gekürzt
Backup der Tabelle heißt backup_user_referer
Tabelle ordner
Neuer indizes auf hoster und hoster/priorität
Backup der Tabelle heißt backup_ordner
Tabelle cronjobs
Index auf Cronjob entfernt, weil schon als Primärschlüssel hinterlegt.
Tabelle captchas
Neuer index auf ipAddress und auf created
Umgewandelt nach innodb
Backup der Tabelle heißt backup_captchas
Tabelle statistik_ordner
Umgewandelt nach innodb
Backup der Tabelle heißt backup_statistik_ordner
Werte in der my.cnf geändert
5. User Refferer, Domain Stats
User Domain Statistiken, doppelte Einträge löschen, Tabelle neu zu ordnen etc.
Grund: Aufrufe stehlen uns bis 9 sekunden pro Aufruf und bringen somit viel Last mit sich.
Hierzu werden wir die Tabelle neu anlegen, s*****e zum sortieren etc ausführen und alte Daten Importieren. Es werden Zahlen eine Zeit lang nicht angezeigt oder unvollständig. Nach dem Fix sollte alles beim alten sein. Falls nicht. 1-2 Tage Geduld bitte.
Geplanter Termin (Offtime Möglichkeit) Sonntag auf Montag Morgen 02.00 Uhr. Info: diese Aktion haben wir von Samstag auf Sonntag bereits erledigt.
6. Captcha; Neu Laden bei nicht lesbarkeit (java) fixt
Nachdem man Änderungen vollzogen hat, muss man jeden Schritt erneut prüfen um weitere Fehler bzw. Last Quellen finden zu können.
Nach den Änderungen hier jedoch sollte V1 von Linksave.in zum großen Teil Technisch generall überholt sein, so das wir uns für V2 Zeit lassen können um diese von Grund an neu zu gestalten.
Weitere Offtimes außerplanmässig:
16.10
ca. 12 Uhr; die 10 Min Offtime kam von einigen Tests, welche wir ausführen mussten um Problemquellen im laufenden Betrieb ausmachen zu können.
In Zukunft werden wir dies auch wenn möglich auf Morgens legen.
16.10
ab ca. 16:30. Unser Glücktag, kaum haben wir das nötige KnowHow, das Team, Die Lösungen, schmiert uns die größte Table in unserer Datenbank ab. Grund werden die vielen Neustarts heute gewesen sein. 100x geht es gut, diesmal halt nicht.
Möglichkeit wäre gewesen LS Off zu nehmen, aber das hätte auch für Ärger gesorgt, daher wurde anscheinend (noch in Klärung) so neugestartet was die Table crashed hat. Mehr dazu hier
17.10
ca. 35 Minuten. Durch Optimierungen konnten nicht alle Server angesteuert werden. Wurde gefixt. Weitere Optimierungen laufen
|
Quelle: [ Link nur für registrierte Mitglieder sichtbar. Bitte einloggen oder neu registrieren ]
Um man schnell zu sagen was das nun bedeutet.
Durch die Wartungsarbeiten kann es zu Downzeiten kommen, dadurch sind die Links natürlich für gewisse Zeit nicht zu erreichen.
Andererseits bedeutet die Umstrukturierung mehr Performance, Sicherheit und evtl. auch Features.
|
|
|
Forumregeln
|
Du kannst keine neue Themen eröffnen
Du kannst keine Antworten verfassen
Du kannst keine Anhänge posten
Du kannst nicht deine Beiträge editieren
HTML-Code ist Aus.
|
|
|
Alle Zeitangaben in WEZ +1. Es ist jetzt 10:00 Uhr.
().
|