Guten Morgen @DanielK und @hansna,

ich hoffe die Probleme in euren Systemen werden schnellstmöglich behoben. Wir sind gerade selbst dabei das Update auf unserem Dev System zu testen, haben bisher allerdings noch keine Probleme mit der Performance feststellen können. Wir wollten so schnell es geht das Update auf unserem Produktiv System durchführen, werden damit allerdings erstmal warten und schauen woher diese Performance Probleme kommen.

Könnt ihr mir vielleicht mitteilen ob ihr Xentral als Cloudhosting oder On-Premises verwendet? Ich werde heute selbst mal einen Lastentest durchführen um zu schauen, ob es bei unserer Instanz auch zu Performance Probleme kommt. Falls ich irgendwelche Erkenntnisse bekomme werde ich diese hier posten.

Gruß

Felix

Wir nutzen Xentral als Cloudhosting. 

Ich habe das Gefühl, zu “normalen” Arbeitszeiten ist das System enorm träge und fehlerhaft.
Abends dann deutlich besser. 

Ok wir Hosten Xentral selbst, vielleicht konnte ich deshalb noch keine Performance Probleme feststellen.

Möglicherweise liegt das Problem dann gar nicht am Update selbst, sondern am Hosting. Wäre natürlich interessant zu wissen, ob nur Cloud Hosting Kunden betroffen sind. Xentral müsste das ja relativ einfach überprüfen können, bzw. hat das denke ich schon gecheckt.

Kann man das Problem auf Cloud Kunden eingrenzen? Dann würde es zumindest wenig Sinn machen, wenn ich bei unserem eigenen System nach Performance Problemen suchen würde.

Gruß Felix

Hey ihr Lieben, 

vielen Dank erstmal für eure vielen Antworten und die Versuche euch gegenseitig zu helfen und vor Allem auch uns mit all euren Informationen beim Finden der Ursache zu helfen! 

Wir hatten gerade einen sehr lehrreichen Call mit @hansna , wo wir noch mal genau sehen konnten was  es für und wo es diese Probleme gibt und geben kann. Vielen Dank dir auch noch Mal! 

An diesen Performance Problemen arbeiten sowohl unsere Produktmanager, als auch unsere Entwickler mit höchster Priorität. 

Wir möchten uns hier an dieser Stelle noch einmal für die Probleme entschuldigen und wir halten euch natürlich über alle Kanäle auf dem Laufenden! 

Außerdem hoffen wir, dass wir noch heute mit einem Update auf euch zukommen können! 

LG 

Hallo zusammen,

wir haben eben mal ein Update gezogen und leider bisher keine großartige Verbesserung gesehen. War das schon die versprochene Performance-Verbesserung?

LG

Hallo, 

ein kurzes Update zu den Performance-Issues in der 22.1. 

• Quick-Win: Wir haben alle Kunden die uns Performance-Issues in Ihrer 22.1 Instanz gemeldet haben und Xentral via Cloud nutzen auf die nächst höhere EC2 Instanz gesetzt, d.h. ihr habt alle mehr vCPU und Memory bekommen. Ich hoffe, dass das eurePerformance Issues zumindest kurzfristig abfedert.  
• Root-Cause Analyse: Wir gehen aktuell davon aus, dass das Problem mit unseren Queue-Workers zu tun hat, die wir in der 22.1 eingeführt haben und nicht optimal konfiguriert sind 
• Next-step: Um unsere Hypothese zu prüfen haben wir die Queue-Worker Einstellung für einen Testkunden verändert, die ersten Ergebnisse sind positiv (Rückgang der Hardware Usage und weniger SlowQuery Logs). Wir werden das System morgen weiter beobachten. 

Sobald wir uns sicher sind, dass wir tatsächlich den root-cause identifiziert haben, stellen wir allen 22.1 Kunden ein neues Update zur Verfügung mit den verbesserten Queue-Worker Einstellungen.  

Hallo zusammen,

also so langsam ist das nicht mehr lustig. Nachdem gestern abend und heute morgen wirklich eine Verbesserung eintrat dank eurer Veränderungen sind wir ab jetzt komplett arbeitsunfähig. Es lädt entweder knappe 1 Minute oder noch besser es kommen folgende Fehlermeldungen.

500 Gateway

504 Gateway Zeitüberschreitung

Ich bitte euch dringendst dies zu beheben oder uns wieder auf die alte Version zu ziehen. 

PS. Jetzt geht es wieder aber das System ist immer noch sehr sehr langsam und teilweise werden vorhandene Adresse oder Aufträge nicht gefunden.

P.S. II: Nun geht wieder nix...Und eine neue Fehlermeldung ist da..502 Bad Gateway

LG

Hallo @Jan Christlieb & @Jonas Müller,

da es bisher ja scheinbar noch keine abschließende Lösung des Problems gibt. Könnt ihr vielleicht mitteilen ob nur Cloud Kunden betroffen sind, oder ob ihr generell allen Kunden davon abratet das Update derzeit durchzuführen?

Wir wollten das Update eigentlich spätestens nächste Woche auf unserem Produktivsystem einspielen, haben den Prozess jedoch vorerst gestoppt, weil das ganze durch die Meldungen hier zu riskant wurde.

Ich würde mir wünschen, dass man dazu mehr Infos bekommt und Xentral aktiv auf die Kunden zugeht. Jeder der diesen Thread nicht liest wird ja Ahnungslos ein Update durchführen und wenn er Pech hat, funktioniert das System danach nicht mehr. Ich finde es unverantwortlich, dass die Kunden nicht informiert werden.

Für alle direkt betroffenen hoffe ich das es bald einen funktionierenden fix gibt.

Gruß

Felix

Guten Tag,

und schon wieder ein neuer Tag mit weiteren schlechten Xentral-Nachrichten. Kann jemand von offizieller Seite mal wieder ein Update geben? Gefühlt wird das System von Tag zu Tag bescheidener, wenn es mal überhaupt funktioniert. Unser Versandzentrum braucht momentan fast doppelt so lange für die Pakete.

Gruß

Dominic

Hallo @Joshua Rolef,
 

gerne gebe ich dir hier eine kurze Rückmeldung.

Wir haben auch deine Cloud Instanz noch einmal angepasst, sodass du mittlerweile keine Performance Probleme mehr haben solltest. Gerne kannst du mir in deinem Support Ticket, oder hier eine kurze Rückmeldung geben, ob die Maßnahme bei deiner Instanz geholfen hat, oder ob wir noch einmal nachbessern müssen.

Vielen Dank und liebe Grüße

Leo
Customer Success Manager

Hey ihr Lieben! 

entschuldigt einmal die späte Rückmeldung! 

@Joshua Rolef wir haben nun deine Instanz geupgraded und somit solltest du eine deutliche Leistungssteigerung merken. Bei anderen hat das den Fehler teilweise komplett behoben. Magst du mir dazu einmal eine Rückmeldung geben? 

@Felix zu deinen Fragen habe ich mich mit dem Produktteam zusammengeschlossen und noch mal durchgesprochen. Generell können wir im Moment das Upgrade sehr empfehlen, auch besonders im Hinblick auf die neue Amazon API. Bezüglich des Problems der Performance Schwierigkeiten befinden wir uns derzeit noch auf Ursachenforschung, können aber sagen, dass es bisher “nur” 10 aus über 500 geupdateten Instanzen betroffen hat. Außerdem waren bisher nur Cloud Customer betroffen. Das darf natürlich trotzdem nicht passieren, deswegen Monitoren unsere Experten diese Instanzen dauerhaft und können jederzeit ein Upgrade durchführen. Dies hat auch bisher bei allen Kunden geholfen das Problem zu beheben. 
Wir bitten deshalb auch weiterhin alle Kunden, die auf Schwierigkeiten stoßen sofort mit uns Kontakt aufzunehmen, sodass wir euch helfen können! 

Bitte meldet euch umgehend bei weiteren Fragen oder Problemen und entschuldigt noch einmal die Unannehmlichkeiten!

LG 

 

@Jonas Müller 

Ja wir merken eine Leistungssteigerung, allerdings nur im Bezug der Ladezeiten was die Module an sich angeht. Sobald man spezifische Daten (Aufträge oder Adressen) sucht kommt es wieder zu Problemen. Entweder findet das System einen Auftrag gar nicht, es dauert lange meist 30 sec (obwohl die Sanduhr weg ist und dann aus dem Nichts!) und das auch obwohl es vorher hieß keine Daten gefunden. 

Zudem haben wir immer noch die Problematik mit den Rechten und dementsprechend der Problematik, dass wir aus dem System geschmissen werden. 

Grüße 

Unsere Performance Probleme sind im Moment behoben, aber leider bekommen wir seit dem ursprünglichen Update am 21.04 keine Zahlen mehr von Amazon an die Amazon Seller App. Ein Fall wurde bereits erstellt. 

Ich kann an dieser Stelle, mit den Problemen der letzten 8 Tage, nicht ganz verstehen, wieso ihr das Update jedem empfiehlt. 2% aller geupdateten Kunden hatten solch gravierende Probleme, dass sie ihre Geschäfte nicht durchführen konnten. Und selbst wenn die Performance wieder da ist, so ergeben sich (zumindest bei uns und zwei weiteren mir bekannten Unternehmen) Probleme an anderer Stelle, die den Arbeits-Alltag erheblich erschweren. Sorry, bei vielem Verständnis, aber das darf nicht passieren. Nicht so, wie ihr das Update auf allen Instanzen bewerbt: “Wir haben an diesem Upgrade besonders sorgfältig gearbeitet und es ausgiebig getestet, um Probleme zu vermeiden, die bei früheren Upgrades aufgetreten sind. Somit bieten wir dir mit 22.1 das bisher stabilste und sicherste Upgrade”

Ich stehe nach wie vor für Gespräche zur Verfügung und wünsche allen ein schönes Wochenende!

Liebe alle,
ich hoffe erstmal, Ihr hattet ein angenehmes Wochenende und konntet die steigenden Temperaturen und die Sonne genießen 
Zum Update: Vielen Dank, für das beständige Feedback! Wären wir uns der Performance-Schwierigkeiten bewusst gewesen, die bei einigen auftreten können, hätten wir das Update selbstverständlich nicht veröffentlicht - Euer Feedback hilft uns daher sehr dabei, die Ursache des Problems zu finden und auch zu beheben! Wir, das Community-Team, stehen im ständigen Kontakt mit unserem Produkt-Team und leiten euere Rückmeldungen direkt weiter. Sollten wir hierzu noch direkte Insights von Euch benötigen, kommen wir gerne auf das Angebot zurück und nehmen direkten Kontakt zu euch auf - vielen Dank dafür!
Durch die vielen bereitgestellten Infos, beschleunigt sich unsere Arbeit in diesem Bereich stark. 
Ich bin daher zuversichtlich, dass wir das Problem noch Anfang der Woche in den Griff bekommen!
@Jonas Müller und ich werden euch hierzu beständig auf dem Laufenden halten und euch direkt benachrichtigen, sobald ein Fix bereitsteht.

Liebe Grüße,

Guten Tag,

nachdem es Ende letzter Woche besser wurde mit der Performance, ist es momentan fast gar nicht mehr möglich zu arbeiten. Das ist an einem Montag zwecks Amazon natürlich eine Vollkatastrophe. Bitte schaut nochmals bei uns nach, ob man hier nochmals performancemässig nachlegen kann.

LG

Hey @Joshua Rolef , 

wir haben deine Cloud noch mal geupgraded heute Mittag, danach ist es wahrscheinlich noch mal zu Schwankungen gekommen. Kannst du mir jetzt noch ein Mal Bescheid sagen, wie es bei dir aussieht und ob es wieder läuft? :) 

LG 

Hallo Jonas,

immer dann wenn ihr upgraded läuft es wieder besser. Danke euch! Ist halt immer die Frage wie oft sowas immer mal wieder gemacht werden muss. Weil etwas langfristiges wäre schon besser!

LG

Hallo zusammen,

ich möchte euch ein kurzes Update zum Status Quo bzgl. Performance Issues in der 22.1 geben: 

• morgen stellen wir euch die V. 22.1.23 zur Verfügung. Dort gibt es zum einen eine verbesserte Indexstruktur für die Datenbank und Optimierungen in den Einstellungen der Cron Worker.
• Die o.g. Verbesserungen werden eure Instanz zwar beschleunigen, aber wir gehen nicht davon aus damit schon den root-cause gelöst zu haben. Wir werden ggf. Ende der Woche ein weiteres Update zur Verfügung stellen. 

Viele Grüße,

Jan

Bei uns ist der Update auf die 22.1.24 auch schief gelaufen. Bitte um baldige Lösung/Eskalation. Das solche Probleme auch für gehosteten Versionen ein Thema sind nervt ehrlich gesagt unheimlich.

Die Forderung upzudaten kommt ja von Xentral… Wie kann es dann nicht klappen? 

Ticket Ref.: #149011   

MfG

Antonio

Hey @UNDGRETEL,

danke für deinen Post, ich habe in das Ticket reingeschaut und das natürlich auch weitergeleitet! Wir arbeiten für dich schnellstmöglich an einer Lösung! 

Gib mir bitte Bescheid, sollte sich hier etwas ändern. Ich halte dich natürlich auch hier auf dem Laufenden! 

LG 

@UNDGRETEL wir haben deinen Fall vorhin auch noch an unser Entwicklungsteam eskaliert. Ich habe außerdem gerade die Bestätigung bekommen, dass deine Instanz in wenigen Minuten wieder erreichbar sein sollte. :) 

Bitte gib mir gerne Bescheid, wenn es wieder klappt! 

LG

Hi @Jonas Müller, wir haben das Update durchgeführt und können uns seitdem nicht mehr einloggen….

Euer Enterprise Telefon Support ist nicht erreichbar - Key Account Manager ebenfalls nicht. Sofern wir uns bis morgen früh um 7h weiterhin nicht einloggen können wird es kritisch! 

Ticket: #149046

Wir brauchen ebenfalls bitte dringend Support @Jonas Müller 

Gruß,

Tim

Hey @Tim Ehrenberg , 

meine Kollegin hat dir gerade auch schon im Ticket geschrieben! Wir haben dein Problem mit höchster Priorität eingestuft und werden dir schnellstmöglich helfen! 

Gib uns bitte ein Update, sollte sich von deiner Seite aus noch etwas verändern. Ich halte dich hier aber auch auf dem Laufenden! 

LG 

Hey @Tim Ehrenberg , 

magst du mir einmal bestätigen, ob die Instanz von dir wieder läuft? Unser Entwicklungsteam hat mir gerade bestätigt, dass bei dir wieder alles laufen sollte! 

Wir haben außerdem herausgefunden, dass sich dein Problem nach kurzer Zeit von selbst behoben hätte. Es handelt sich um eine noch nicht 100% fertig gestellte Tabelle im Hintergrund. Wir arbeiten daran das Problem in Zukunft zu verhindern. :) 

LG 

Guten Morgen @Jonas Müller,

vielen Dank für den schnellen Support. Ja, bei uns funktioniert vorerst wieder alles. 

Beste Grüße,

Tim