Das System muss vorher auf eine Version mit MySQL 8.x geupdatet werden (Release 3.15 bis 3.17).
Bei jeder Aktualisierung gibt es eine goldene Regel, die unabhängig von den Wünschen des Kunden strikt befolgt werden muss:
Es muss IMMER einen Weg zurück geben. |
Bevor man ein System aktualisiert, sollte man es gut kennen. |
Bei manchen Installationen, ist das File-Share auf ein System, der vom Kunden bereitgestellt wird.
In diesen Fall erfolgt das Checkout der Repositories lokal auf den Load-Balancer auf den Non-Authoritative Share, die Dateien werden aber später auf den "Authoritative" File-Share kopiert.
Nach Änderungen sollte auf den Authoritative File-Share geprüft werden.
Dieser ist /home/jtel/shared
Dieser ist /srv/jtel/shared
Wenn /home/jtel/shared auf den Load-Balancer von einem Fremdsystem gemountet ist, dann ist es in der Regel nicht authoritative.
Dies kann man einfach bestimmen, indem man eine Datei auf /srv/jtel/shared erzeugt. Erscheint dies nicht in /home/jtel/shared, so ist /srv/jtel/shared nicht authoritative.
Es sollte unbedingt eine Datensicherung angefertigt werden. Das MINIMUM ist dass die Datenbank gesichert wird, und das Datenverzeichnis gesichert wird, dies sollte jedoch nur die Notlösung sein.
Besser ist ein Snapshot aller beteiligten virtuellen Maschinen, im Kaltzustand (heruntergefahren).
Die Gefahr besteht, dass wenn ein Snapshot im laufenden Betrieb gezogen wird (insbesondere der Datenbankmaschinen), dass dieser nicht konsistent ist.
Auf TEL Servern alle Anwendungen stoppen
Alle Webserver, die JBOSS Server stoppen: service jboss stop
Alle DB Master: service jtel-listener stop Alle Chat Server: service jtel-clientlistener stop |
Das entsprechende Passwort bei <password> eintragen:
su jtel cd mkdir -p /home/jtel/shared/Backup mysqldump -u root -p<password> --add-drop-database --add-drop-table --events --routines --triggers --databases JTELWeb JTELStats JTELStats2 JTELLog | gzip > /home/jtel/shared/Backup/backup-$(hostname -s)-database-$(date +%F-%H%M%S).sql.gz |
Dies kann über den Windows Explorer oder ein entsprechender cp Befehl auf den Linux erfolgen.
Vom Load-Balancer aus, den GIT Status prüfen:
cd /home/jtel/shared/JTEL git status git rev-parse HEAD (ausgaben sichern) cd /home/jtel/shared/JTELCarrierPortal git status git rev-parse HEAD (ausgaben sichern) # FALLS EIN Kundenspezifischer Verzeichnis vorhanden ist cd /home/jtel/shared/Customer_Directory git status git rev-parse HEAD (ausgaben sichern) |
Ggf. müssen hier die Verzeichnisse ebenso in die Datensicherung mit aufgenommen werden, insbesondere dann, wenn Patches eingespielt wurden, sodass lokale Änderungen erfolgt sind.
Sind weitere Komponenten vom Update betroffen, wie der 8-Server selbst, oder der JBOSS Server (nicht die Webanwendung), sollten diese Komponenten vorab auch gesichert werden.
Dies erfolgt über die VMWare Konsole, oder Hyper-V Konsole. Dies wird üblicherweise durch den Kunden durchgeführt.
Erst wenn die Datensicherung erfolgt ist (ggf. vom Kunden bestätigen lassen!), weitermachen! |
Die Snapshots werden alle wieder aktiviert, und hochgefahren. Es sollte ein normaler Betrieb mit den alten Software-Stand herrschen.
Mit allen Diensten gestopped, die Datenbank zurücksichern. Das entsprechende Passwort bei <password> eintragen:
cp /home/jtel/shared/Backup/backup-acd-dbm-database-2016-06-30-293211.sql.gz . gunzip backup-acd-dbm-database-2016-06-30-293211.sql.gz mysql -u root -p<password> -e"backup-acd-dbm-database-2016-06-30-293211.sql" |
Parallel dazu, kann das alte Data Verzeichnis zurückgespielt werden.
Ggf. sind weitere Schritte erforderlich (GIT Repositories zurücksichern, 8-Server zurücksichern, ...) je nach dem welche Komponenten beim Update betroffen waren.
Mach lieber ein Snapshot. |
Es sei hier noch mal erwähnt: alle jtel-Dienste des Systems müssen herunter gefahren sein.
Danach kann mit der Aktualisierung begonnen werden. Die Schritte erfolgen in der hier dokumentierten Reihenfolge
Dieser Schritt muss als Benutzer "jtel" erfolgen.
jtel hat seine Repository-Server umgezogen in die Cloud. Siehe hier: New Repository Locations Es ist nötig, die URL der GIT repositories zu verändern, bevor man hier weitermacht. |
Bevor die Software aktualisiert wird, sollte noch geprüft werden, ob im jeweiligen Verzeichnis Dateien geändert wurden.
Es sollte in /home/jtel/shared eine readme.txt vorhanden sein, der eventuell eingespielte Patches auflistet. |
Hier ein Beispiel basierend auf das Software-Verzeichnis JTELCarrierPortal:
su jtel cd /home/jtel/shared/JTELCarrierPortal git status git rev-parse HEAD exit |
Wird hier angezeigt, dass Dateien verändert wurden, ist Vorsicht geboten. Der Projektingenieur muss vorher prüfen, ob die Änderungen lokale Bugfixe sind, die inzwischen ins Release eingeflossen sind. In diesem Falle können die Änderungen vor der Aktualisierung gelöscht werden. Tut man dies nicht, so kann die Aktualisierung scheitern!
su jtel cd /home/jtel/shared/JTELCarrierPortal git checkout -- . exit |
Eine allgemeine Vorgehensweise kann in einem solchen Fall aber nicht beschrieben werden. Hier muss von Fall zu Fall geprüft werden, wie vorgegangen wird.
Falls Datei-Modus Änderungen ignoriert werden sollen, kann folgender Befehl genutzt werden:
git config core.fileMode false |
Die folgende Befehlssequenz aktualisiert alle Software-Verzeichnisse auf dem letzten Stand des jeweilig eingestellten Releases.
su jtel cd /srv/jtel/shared/JTELCarrierPortal git pull cd /srv/jtel/shared/JTEL git pull cd /srv/jtel/shared/Customer_Directory git pull exit |
Falls Fehler beim GIT auftreten, beispielsweise:
Merge-Konflikt in (Dateiname)
Oder
fatal: Verweigere den Merge von nicht zusammenhängenden Historien.
muss das lokale Repository resettet werden. Dies kann wie folgt (Beispiel für stable-3.18 auf JTELCarrierPortal) geschehen:
su jtel cd /srv/jtel/shared/JTELCarrierPortal git reset --hard origin/release/stable-3.18 |
Nachdem der GIT PULL erfolgt ist, muss das entsprechende Release ausgechecked werden, falls ein anderer als mit git status gewünscht ist.
su jtel cd /srv/jtel/shared/JTELCarrierPortal git checkout release/stable-3.18 cd /srv/jtel/shared/JTEL git checkout release/stable-3.18 cd /srv/jtel/shared/Customer_Directory git checkout release/stable-3.18 exit |
Es kann sein, dass git den gewünschten Release nicht kennt, trotz git pull und git checkout. git fetch --unshallow git config remote.origin.fetch "+refs/heads/*:refs/remotes/origin/*" git fetch origin |
Nur wenn es ein Authoritative / Non-Authoritative share gibt.
Dies geschieht mit folgender Skript
cd /srv/jtel/shared/JTELCarrierPortal/ bash update_fileshare.sh |
Folgender Aktualisierungsskript führt alle notwendigen Änderungen durch. Dies wird als root oder jtel mit sudo ausgeführt. Hier mit jtel user:
cd /home/jtel/shared/JTELCarrierPortal/Update sudo ./update_release.sh |
Ggf. wird man zuerst nach den sudo Passwort gefragt.
Das Skript fragt nach den entsprechenden Master Datenbank, Benutzer, Passwort, und Name des Kundenverzeichnisses indem ggf. spezifische Software für den Kunden liegt.
Die Fragen können, in der Regel mit folgende Antworten beantwortet werden, Kenntnis von <password> für die Datenbank vorausgesetzt:
Falls kein Customer Directory vorhanden ist, kann dies leer gelassen werden. Das Vorhandensein von Kundenspezifische Software kann mit ls /home/jtel/shared geprüft werden - dort die Namen der Verzeichnisse anschauen. Nur den Namen des Verzeichnisses angeben! Beispielsweise acme
Anschließend wird das Update durchgeführt.
In einer Master/Slave Umgebung ist unbedingt darauf zu achten, diese Prozedur gegen der Master-Datenbank durchzuführen - sprich mysql host address = MASTER-DB. Tut man dies aus Versehen auf einem Slave, hat man Chaos gesät: der Slave ist dann kaputt, und muss neu aufgesetzt werden. Die Aktualisierung muss dann (korrekt auf dem Master) wiederholt werden. |
Die Binaries werden mit folgenden Befehl heruntergeladen:
cd /home/jtel/shared/JTELCarrierPortal/Update su jtel bash get_binaries.sh |
Bei Release 3.18 und höher, wird Java 8 verwendet. Das (vorhandene) Java 7 muss deinstalliert werden, und Java 8 wird installiert.
Wir verwenden den openjdk, sodass es unter Linux Updatefähig bleibt.
service jtel-listener stop yum -y remove jdk.x86_64 yum -y install https://cdn.jtel.de/downloads/java/jdk-8u202-linux-x64.rpm |
Die Aktualisierung des Platform UDP Listeners muss als Benutzer "root" ausgeführt werden und erfolgt auf die Master Datenbanken durch Eingabe folgendem Befehls:
updatepl.sh |
Dieser Befehl aktualisiert den Listener und startet ihn. Der Erfolg kann durch Sichtung der Datei /home/jtel/PlatformUDPlistener/log/listener.log geprüft werden.
Der Listener ist nur auf die Master-Datenbanken dann installiert, wenn eine SOAP Schnittstelle lizenziert ist. |
Hier ist zu prüfen ob Java 8 installiert ist. Ggf. Java 8 von einer der Quellen hier herunterladen (dies sind BCL lizenzierte Versionen, also Lizenzfrei):
Das Start-Skript für den Platform-Listener kopiert die neue Version des Listeners selbst.
Ist der Platform-Listener auf den TEL Servern als Dienst installiert, reicht ein Neustart als Dienst NICHT aus. In diesen Fall sollte der Listener einmal von der Konsole aus gestartet werden, damit das Kopieren auch geschieht. |
Der JBOSS Server wird komplett ersetzt durch ein Wildfly Server.
Falls keine Sicherung bereits vorhanden:
cp /home/jtel/jboss-as-7.1.1.FINAL/standalone/configuration/hazelcast.xml /home/jtel/shared |
Als root:
service jboss stop yum -y remove jdk.x86_64 cd /home/jtel chkconfig jboss off rm -f /etc/init.d/jboss rm -f /etc/cron.daily/jboss-logmaint.sh rm -f /etc/cron.daily/jboss-restart.sh rm -f /usr/local/bin/updatejb.sh rm -Rf jboss-as-7.1.1.FINAL |
yum -y install https://cdn.jtel.de/downloads/java/jdk-8u202-linux-x64.rpm wget http://cdn.jtel.de/downloads/jboss/wildfly-18.0.1.Final.01.tar.gz tar xzf wildfly-18.0.1.Final.01.tar.gz rm -f wildfly-18.0.1.Final.01.tar.gz mkdir -p wildfly-18.0.1.Final/standalone/deployments chown -R jtel:jtel wildfly-18.0.1.Final mkdir -p /home/jtel/upload chown -R jtel:jtel /home/jtel/upload ln -s /home/jtel/wildfly-18.0.1.Final wildfly-current ln -s /home/jtel/wildfly-current/init.d/wildfly /etc/init.d/wildfly ln -s /home/jtel/wildfly-current/default/wildfly /etc/default/wildfly cd /etc/cron.daily ln -s /home/jtel/wildfly-current/bin/jboss-logmaint.sh ln -s /home/jtel/wildfly-current/bin/jboss-restart.sh cd /usr/local/bin ln -s /home/jtel/wildfly-current/bin/updatejb.sh chkconfig wildfly on |
Die hazelcast.xml muss kopiert werden, und die Standardeinstellungen für die Datenbank müssen angepasst werden.
Im folgenden <password> bitte entsprechend ersetzen:
DBPRI=acd-dbm
DBSTA=acd-dbs
DBREP=acd-dbr
DBPWD=<password>
sed -i -e "s/DATA_PRIMARY/${DBPRI}/g" -e "s/DATA_STATS/${DBSTA}/g" -e "s/DATA_REPORTS/${DBREP}/g" -e "s/DB_PASSWORD/${DBPWD}/g" /home/jtel/wildfly-current/standalone/configuration/standalone.xml
unset DBPWD
unset DBREP
unset DBSTA
unset DBPRI
cp /home/jtel/shared/hazelcast.xml /home/jtel/wildfly-current/standalone/configuration/ |
Die Aktualisierung der Portalsoftware muss als Benutzer "root" auf dem Webserver ausgeführt werden und erfolgt durch Eingabe folgendem Befehls:
updatejb.sh |
Dieser Befehl aktualisiert die Portalsoftware und startet den wildfly Server. Der Erfolg kann durch Sichtung der Datei /home/jtel/wildfly-current/standalone/log/server.log geprüft werden.
Dort sollten in der Log-Datei folgende Einträge zu sehen sein, wenn die Aktualisierung erfolgreich war:
Die Aktualisierung des 8Server erfolgt im Windows-Explorer mittels GIT. Hierfür wird mit einem Rechtsklick auf das Verzeichnis C:\8Server\deploy ein GIT Pull durchgeführt, und auf das gewünschte Version nach dem Pull gewechselt.
jtel hat seine Repository-Server umgezogen in die Cloud. Siehe hier: New Repository Locations Es ist nötig, die URL der GIT repositories zu verändern, bevor man hier weitermacht. |
Möchte man nicht auf die letzte Version, sondern auf eine spezifische Version aktualisieren, erfolgt dies Über "git checkout" mit Angabe des Releases.
Nach dem Aktualisieren, muss die Version dann installiert werden. Bei einem Daemon-Server erfolgt dies mit dem Befehl:
C: cd \8Server\Install copy_keyfile_en_daemon.cmd |
Bei einem Telefonie-Server mit Aculab Media Service erfolgt dies mit folgendem Befehl:
C: cd \8Server\Install copy_keyfile_en_mcp.cmd |
Im Anschluss kann der 8Server gestartet werden.
Grundsätzlich gilt: die entsprechenden Dateien aus dem Software-Verzeichnis im STORE müssen ins Zielverzeichnis kopiert werden.
Diese kommen in der Regel aus dem Bereich JTELCarrierPortal/WebServices/Install
Bei Kopieraktionen ist unbedingt darauf zu achten, die Konfigurationsdateien nicht zu überschreiben! Diese haben Namen, die sich an den Namen des ausführbaren Programm häufig anlehnen. Beispiel: |
Ist die Aktualisierung beendet und die Anlage ohne Fehler wieder hochgefahren, sind folgende Aufgaben zwingend auszuführen:
Auf VMWare sowie Hyper-V können Snapshots zu Performance-Verlusten führen. Die Snapshots sollten gelöscht werden, aber erst dann, wenn sichergestellt ist, dass es kein Zurück mehr geben muss. Dies ist in der Regel nach der ein Wenig Live-Zeit des Call-Centers der Fall. |