Du bist hier: Android Forum » Allgemeines » Ankündigungen / News » Serverprobleme App Center
Gehe zu: Neue Beiträge | Eigene Threads | Beobachtete Threads

Serverprobleme App Center

Um aktiv im Android Forum teilnehmen zu können, musst Du Dich bei AndroidPIT registriert haben.

Alle Beiträge im Thread "Serverprobleme App Center"

Thread geschlossen

Sven Woltmann

User
Handy

Status: Administrator

Rang: Android Gottheit

Beiträge: 1.517

Eintrittsdatum: 07.04.2009

Serverprobleme App Center
verfasst am 07.02.2012 22:57:16 — geändert am 07.02.2012 22:58:04

Liebe Community,

seit einigen Tagen haben wir Probleme mit unseren App Center-Servern. Aus bisher ungeklärter Ursache steigt alle paar Stunden plötzlich die CPU-Last aller Kerne auf 99% an. Die Server sind dann quasi nicht mehr erreichbar und es hilft nur ein Neustart, der etwa 10 Minuten dauert.

Wir konnten folgende Ursachen bisher ausschließen:
- Hardwareprobleme (das Problem besteht, egal auf welchen Server wir die App Center Aufrufe leiten)
- Swapping / IO (keinerlei erhöhte Aktivität feststellbar)
- Störung durch andere Prozesse (die CPU-Last kommt ausschließlich vom Tomcat/JAVA-Prozess)
- Garbage Collector (dieser benötigt -- während der regulären Laufzeit ebenso wie im Problemfall -- etwa 5%-10% der Java-CPU-Zeit)

Momentan läuft auf den Servern ein Profiler in Bereitschaft. Sobald die Last wieder auf 99% steigt, werden wir diesen aktivieren und damit hoffentlich Daten sammeln können, die uns bei der Analyse des Problem helfen.

Bis dahin kann ich euch leider nur um Geduld bitten.

Ich halte euch hier auf dem Laufenden.

Liebe Grüße,
Sven

-----
Android Forum ... AndroidPIT-Regeln

Thread geschlossen Link ±0 (0 Stimmen)

©h®is User Handy Rang: Android GoldSenior Beiträge: 1.387 Eintrittsdatum: 24.11.2009 Modell: HTC Desire HD Firmware: 2.3.5 Mod: EnergyROM (RCMix3D) Kernel: 2.6.35.14-RCMIX3D V8 Build: 1.05.401.4 Provider: O2	RE: Serverprobleme App Center verfasst am 07.02.2012 23:03:02 (über AndroidPIT-App) vielen dank für die ausführliche Information und viel Glück bei der Fehlersuche! ----- desire hd EnergyROM (RCMix3d) Übersichten: Apps nach Einsatzzweck \| Guides: AndroidPITiden-Buch, Auf Reisen, Android-Toolbox \| Suchfunktion Thread geschlossen Link ±0 (0 Stimmen)
Hans K. User Handy Rang: Android GoldSenior Beiträge: 1.373 Eintrittsdatum: 06.06.2011 Modell: Galaxy Nexus Firmware: 4.0.4 Mod: Kein Kernel: 3.0.8-gda6252b android-build@vpbs #1 Build: IMM76I Provider: T-Mobile D	RE: Serverprobleme App Center verfasst am 07.02.2012 23:05:53 (über AndroidPIT-App) — geändert am 07.02.2012 23:06:48 Na, endlich tut sich mal was. Dann mal viel Glück bei der Ursachensuche. Thread geschlossen Link ±0 (0 Stimmen)
3po3 User Handy Rang: Android Gottheit Beiträge: 2.290 Eintrittsdatum: 24.01.2012 Modell: Sony Ericsson Xperia Arc Firmware: 2.3.3 Mod: - Kernel: - Build: - Provider: Aldi Talk/Medionmobile	RE: Serverprobleme App Center verfasst am 07.02.2012 23:12:56 Ich drück euch alle Daumen! ----- In Memory of SE-World for ever.\|29.08.2012 Mönchengladbach-GREEN DAY KONZERT!!!!!!! YAAH!!!! Thread geschlossen Link ±0 (0 Stimmen)
Sven Woltmann User Handy Status: Administrator Rang: Android Gottheit Beiträge: 1.517 Eintrittsdatum: 07.04.2009 Modell: Galaxy Nexus Firmware: 4.0.2 Mod: - Kernel: 3.0.8-gaaa2611 android-build@apa28 #1 Build: ICL53F Provider: T-Mobile D	RE: Serverprobleme App Center verfasst am 09.02.2012 17:44:22 Hallo zusammen, soeben haben unsere App Center Server wieder die 99% CPU-Last-Marke überschritten. Ich konnte mit Hilfe des Profilers eine CPU-Statistik erstellen, die ich nun auswerten werde. Die Server sind neugestartet und laufen wieder. Ich melde mich, sobald ich Ergebnisse der Analyse habe. Viele Grüße, Sven ----- Android Forum ... AndroidPIT-Regeln Thread geschlossen Link ±0 (0 Stimmen)
Hans K. User Handy Rang: Android GoldSenior Beiträge: 1.373 Eintrittsdatum: 06.06.2011 Modell: Galaxy Nexus Firmware: 4.0.4 Mod: Kein Kernel: 3.0.8-gda6252b android-build@vpbs #1 Build: IMM76I Provider: T-Mobile D	RE: Serverprobleme App Center verfasst am 09.02.2012 17:49:05 Yeehaw! Thread geschlossen Link ±0 (0 Stimmen)
Tim F. User Handy Rang: Android GoldSenior Beiträge: 1.330 Eintrittsdatum: 14.06.2011 Modell: HTC Desire HD Firmware: 4.0.4 Mod: ändert sich des öfteren Kernel: - Build: Provider: T-Mobile D	RE: Serverprobleme App Center verfasst am 09.02.2012 18:06:53 Hallo, kann es sein, dass manchmal die gesamte Hompage auch nicht läuft? Oder ist das nur bei mir so? Gruß Tim ----- HTC Desire HD rootet ICS 4.0.3 + HTC SENSE 4 Thread geschlossen Link ±0 (0 Stimmen)
Sven Woltmann User Handy Status: Administrator Rang: Android Gottheit Beiträge: 1.517 Eintrittsdatum: 07.04.2009 Modell: Galaxy Nexus Firmware: 4.0.2 Mod: - Kernel: 3.0.8-gaaa2611 android-build@apa28 #1 Build: ICL53F Provider: T-Mobile D	RE: Serverprobleme App Center verfasst am 09.02.2012 18:26:21 So... Ergebnis der Analyse: In 116 Sekunden wurde 1614x die App-Suche aus dem App Center aufgerufen. Das ist dann anscheinend zu viel für unsere Server. Ich werde hier mal prüfen, ob die evtl. alle von ein und derselben IP kommen und hier irgendjemand unsere App Center API quasi für andere Zwecke missbraucht. Bzgl. der gesamten Webseite: Wenn die App Center Server überlastet sind, dürfte das Laden von Bildern auf der Webseite verzögert sein, da die Bilder zufällig von einem unserer 4 Server geladen werden. Viele Grüße, Sven ----- Android Forum ... AndroidPIT-Regeln Thread geschlossen Link ±0 (0 Stimmen)
©h®is User Handy Rang: Android GoldSenior Beiträge: 1.387 Eintrittsdatum: 24.11.2009 Modell: HTC Desire HD Firmware: 2.3.5 Mod: EnergyROM (RCMix3D) Kernel: 2.6.35.14-RCMIX3D V8 Build: 1.05.401.4 Provider: O2	RE: Serverprobleme App Center verfasst am 09.02.2012 18:33:23 (über AndroidPIT-App) na, da bin ich ja gespannt was da rauskomnt.. ----- desire hd EnergyROM (RCMix3d) Übersichten: Apps nach Einsatzzweck \| Guides: AndroidPITiden-Buch, Auf Reisen, Android-Toolbox \| Suchfunktion Thread geschlossen Link ±0 (0 Stimmen)
Tim F. User Handy Rang: Android GoldSenior Beiträge: 1.330 Eintrittsdatum: 14.06.2011 Modell: HTC Desire HD Firmware: 4.0.4 Mod: ändert sich des öfteren Kernel: - Build: Provider: T-Mobile D	RE: Serverprobleme App Center verfasst am 09.02.2012 19:09:58 ja, bin auch gespannt, ob da jemand den Server sabotieren will. Ist es vielleicht auch möglich, dass der Server ,,angepingt" wird? Gruß Tim ----- HTC Desire HD rootet ICS 4.0.3 + HTC SENSE 4 Thread geschlossen Link ±0 (0 Stimmen)
Käpt'n Andreas V. User Handy Status: Super-Blogger, Moderator Rang: Android Gottheit Beiträge: 5.124 Eintrittsdatum: 24.02.2010 Modell: Samsung Galaxy Note (N7000) Firmware: 4.0.3 Mod: CF Root Kernel: 3.0.15-N7000XXLPY-CL474507 Build: IML74K.XXLPY Provider: O2	RE: Serverprobleme App Center verfasst am 09.02.2012 19:29:58 Sven Woltmann In 116 Sekunden wurde 1614x die App-Suche aus dem App Center aufgerufen. Das ist dann anscheinend zu viel für unsere Server. Ich werde hier mal prüfen, ob die evtl. alle von ein und derselben IP kommen und hier irgendjemand unsere App Center API quasi für andere Zwecke missbraucht. Da hat aber einer ganz schnelle Finger... und 100-faches LTE ----- Grüße von Andreas - Die Regeln > Unser AppCenter > Das Buch für Einsteiger - kostenlos > Apps nach Einsatzzweck Thread geschlossen Link ±0 (0 Stimmen)
Susie User Handy Rang: Android HiWi Beiträge: 181 Eintrittsdatum: 28.12.2011 Modell: Sony Ericsson Xperia Arc Firmware: 2.3.4 Mod: LT15i Kernel: 2.6.32.9-perf Build: 4.02.A.0.62 Provider: KabelBW	RE: Serverprobleme App Center verfasst am 10.02.2012 08:15:49 (über AndroidPIT-App) Spannende Fehlersuche. auch wenn es lästig ist für euch, seht es positiv: lieber jetzt den Fehler entdecken und beheben!! Daumen drück!! ----- Beginne den Tag mit einem Lächeln, dann hast Du es hinter Dir! Thread geschlossen Link ±0 (0 Stimmen)
Sven Woltmann User Handy Status: Administrator Rang: Android Gottheit Beiträge: 1.517 Eintrittsdatum: 07.04.2009 Modell: Galaxy Nexus Firmware: 4.0.2 Mod: - Kernel: 3.0.8-gaaa2611 android-build@apa28 #1 Build: ICL53F Provider: T-Mobile D	RE: Serverprobleme App Center verfasst am 10.02.2012 10:49:21 — geändert am 10.02.2012 10:49:52 Guten Morgen, ich habe gestern abend noch eine Drosselung eingebaut, so dass jeder unserer Server maximal 4 Suchanfragen gleichzeitig bearbeiten kann. Sobald mehr Suchanfragen gleichzeitig kommen, liefert der Server eine Fehlermeldung für diese eine Suchanfrage. Alle anderen Requests werden jedoch weiterhin bearbeitet. So kann es nicht mehr zu einer Überlastung der Suche und dadurch zu einer Überlastung des gesamten Servers kommen. Interessant ist die Verteilung der Anfrage-Abweisungen: - 32 Abweisungen innerhalb von 21 Sekunden zwischen 02:04:23 und 02:04:44 - 2 Abweisungen innerhalb von 2 Sekunden zwischen 09:15:31 und 09:15:32 - 1 Abweisungen um 09:59:32 - 1 Abweisungen um 10:28:13 Die vereinzelten Abweisungen heute vormittag sind normal. Es kommt halt mal vor, dass mehr als 4 User pro Server gleichzeitig im App Center auf "Suche" drücken. Hier werde ich die Grenze erstmal auf 6 heraufsetzen, so dass etwas mehr Abfragen gleichzeitig bearbeitet werden können. Aber die 32 Abweisungen innerhalb von 21 Sekunden heute Nacht machen mir Sorgen. Die werde ich noch weiter analysieren. Viele Grüße, Sven ----- Android Forum ... AndroidPIT-Regeln Thread geschlossen Link +1 (1 Stimme)
Peter W. User Handy Rang: Android Gottheit Beiträge: 2.034 Eintrittsdatum: 17.12.2010 Modell: HTC Desire Firmware: 2.3.7 Mod: CyanogenMod-7.1.0-Desire stable Kernel: 2.6.37.6-cyanogenmod-geb50077 Build: GWK74 Provider: T-Mobile D	RE: Serverprobleme App Center verfasst am 10.02.2012 12:18:26 Ich würde mal vorsichtig behaupten, das die nicht normalen Ursprungs sind. Zumindest nicht ausgerechnet um diese Uhrzeit. Ich bin mal gespannt, was du rausfindest... ----- Gruß Peter Thread geschlossen Link ±0 (0 Stimmen)
Tim F. User Handy Rang: Android GoldSenior Beiträge: 1.330 Eintrittsdatum: 14.06.2011 Modell: HTC Desire HD Firmware: 4.0.4 Mod: ändert sich des öfteren Kernel: - Build: Provider: T-Mobile D	RE: Serverprobleme App Center verfasst am 10.02.2012 17:34:11 (über AndroidPIT-App) ich finde so eine suche nach dem Problem immer sehr spannend. bin in der Schule in einer ag, die Computer repariert, da muss ich auch inner Fehler suchen. mit Netzwerken mache ich auch gerne was... Tim ----- HTC Desire HD rootet ICS 4.0.3 + HTC SENSE 4 Thread geschlossen Link ±0 (0 Stimmen)
©h®is User Handy Rang: Android GoldSenior Beiträge: 1.387 Eintrittsdatum: 24.11.2009 Modell: HTC Desire HD Firmware: 2.3.5 Mod: EnergyROM (RCMix3D) Kernel: 2.6.35.14-RCMIX3D V8 Build: 1.05.401.4 Provider: O2	RE: Serverprobleme App Center verfasst am 14.02.2012 13:10:28 app macht wieder probleme... ----- desire hd EnergyROM (RCMix3d) Übersichten: Apps nach Einsatzzweck \| Guides: AndroidPITiden-Buch, Auf Reisen, Android-Toolbox \| Suchfunktion Thread geschlossen Link ±0 (0 Stimmen)
Carsten Müller User Handy Rang: Android Gottheit Beiträge: 10.463 Eintrittsdatum: 04.06.2010 Modell: Samsung Galaxy Note (N7000) Firmware: 2.3.6 Mod: Kernel: 2.6.35.7-N7000XXLA4-CL886827 Build: GINGERBREAD.XXLA4 Provider: O2	RE: Serverprobleme App Center verfasst am 14.02.2012 13:35:46 (über AndroidPIT-App) ©h®is app macht wieder probleme... Vorhin war auch die Website kurzzeitig tot. Herzliche Grüße Carsten ----- Meine Apps... \| \| Mein Galaxy Note Testbericht (PDF)... \| \| Smileys für die AndroidPIT App? KLICK! Thread geschlossen Link ±0 (0 Stimmen)
Sven Woltmann User Handy Status: Administrator Rang: Android Gottheit Beiträge: 1.517 Eintrittsdatum: 07.04.2009 Modell: Galaxy Nexus Firmware: 4.0.2 Mod: - Kernel: 3.0.8-gaaa2611 android-build@apa28 #1 Build: ICL53F Provider: T-Mobile D	RE: Serverprobleme App Center verfasst am 14.02.2012 13:48:20 Carsten Müller ©h®is app macht wieder probleme... Vorhin war auch die Website kurzzeitig tot. Hallo zusammen, das war eine kurzzeitige Störung im Hetzner Netzwerk (s. http://hetzner-status.de/). Die Probleme auf den App Center Servern scheinen wir mit der Begrenzung auf 6 gleichzeitige Suchen in den Griff bekommen zu haben. Viele Grüße, Sven ----- Android Forum ... AndroidPIT-Regeln Thread geschlossen Link ±0 (0 Stimmen)
Tim F. User Handy Rang: Android GoldSenior Beiträge: 1.330 Eintrittsdatum: 14.06.2011 Modell: HTC Desire HD Firmware: 4.0.4 Mod: ändert sich des öfteren Kernel: - Build: Provider: T-Mobile D	RE: Serverprobleme App Center verfasst am 14.02.2012 14:17:11 (über AndroidPIT-App) habt ihr denn schon rausgefunden, wer da so oft was sucht? ----- HTC Desire HD rootet ICS 4.0.3 + HTC SENSE 4 Thread geschlossen Link ±0 (0 Stimmen)
Sven Woltmann User Handy Status: Administrator Rang: Android Gottheit Beiträge: 1.517 Eintrittsdatum: 07.04.2009 Modell: Galaxy Nexus Firmware: 4.0.2 Mod: - Kernel: 3.0.8-gaaa2611 android-build@apa28 #1 Build: ICL53F Provider: T-Mobile D	RE: Serverprobleme App Center verfasst am 14.02.2012 14:56:09 Tim F. habt ihr denn schon rausgefunden, wer da so oft was sucht? Wir tracken die IP-Adressen der Suchen, doch auch bei Überlast kamen die alle von unterschiedlichen IP-Adressen. Scheinen tatsächlich zufällige Last-Peaks zu sein. Wir haben jetzt zwei neue Server bestellt und werden damit die Leistung der App Center Server um den Faktor 2,3876 erhöhen (die neuen Server sind laut Benchmark 38,76% schneller). Viele Grüße, Sven ----- Android Forum ... AndroidPIT-Regeln Thread geschlossen Link ±0 (0 Stimmen)