Änderungen von Dokument Kopano Optimierungen

Zuletzt geändert von Jonas Mayer am 2022/05/23 12:53

Von 1.4 nach 1.5 Von 23.1 nach 24.1

Von Version 1.5

bearbeitet von Jens Gruber
am 2022/05/02 10:57

Änderungskommentar: Es gibt keinen Kommentar für diese Version

Auf Version 23.1

bearbeitet von Christian Germann
am 2022/05/09 09:12

Änderungskommentar: Es gibt keinen Kommentar für diese Version

Rohform
Im Layout

Zusammenfassung

Seiteneigenschaften (2 geändert, 0 hinzugefügt, 0 gelöscht)

Details

Seiteneigenschaften

Dokument-Autor

@@ -1,1 +1,1 @@
--XWiki.JensGruber@sbede
++XWiki.cge@sbede

Inhalt

@@ -1,67 +1,218 @@
--Es gibt mehrere Anpassungen die sich anbieten um den laufenden Betrieb von Kopano zu verbessern. Folgende Maßnahmen können optional genutzt werden:
++(% style="color:#000000" %)Es gibt mehrere Anpassungen die sich anbieten um den laufenden Betrieb von Kopano zu verbessern. Folgende Maßnahmen können optional genutzt werden:
++{{toc start="4"/}}
--===== **__Zustellbarkeit der Unzustellbarkeits-Nachrichten verbessern__** =====
--Es ist möglich die Zustellbarkeit der Unzustellbarkeits-Nachrichten für den Absender zu verbessern. Dafür ist es notwendig den SMTP-Server des gewählten Mailproviders als Smarthost einzutragen.
++==== **1. Performance-Optimierung** ====
--Bearbeiten Sie in die Datei kopano-g1.yaml im puppeteer Container:
++===== (% style="color:#000000" %)**__1.1 Kopano Leistung verbessern__**(%%) =====
++(% style="color:#000000" %)Kopano ist in der Standardinstallation lediglich für den Betrieb von 10 Benutzern ausgelegt. Das heißt, die Kopano-Serverdienste reservieren mit den Standardeinstellungen sehr wenig Systemressourcen (RAM) und die Plattform arbeitet als Konsequenz sehr langsam, wenn deutlich mehr Benutzer ein Postfach erhalten. Man sollte daher in den meisten Fällen die zugeteilten Systemressourcen (deutlich) erhöhen, um ein vernünftiges Nutzererlebnis zu erzielen.
++
++(% style="color:#000000" %)Um die Einstellungen Puppet-gerecht zu definieren, hilft nachfolgende Auflistung von YAML-Einstellungen. Bei der Auswahl der Werte muss man die **Hardware-Ressourcen** des Servers berücksichtigen, im Beispiel wird von einem leistungsstarken Server mit **32GB** **RAM** und **2 CPU-Sockets** und insgesamt **32 Kernen** ausgegangen.
++
++
++(% style="color:#000000" %)Bearbeiten Sie die Datei kopano-g1.yaml im puppeteer Container:
++
  {{code language="bash"}}
  root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
  {{/code}}
++Passen Sie die kopano-g1.yaml je nach Größe der Schule an.
--Die Zeile "ld_kopano::postfix::hashes:" beschreibt das Handling für den Null-Sender. Fügen Sie nun die Zeile "<> smtp.meineschule.de" ein (Ergänzen Sie die smtp Adresse durch die von ihnen genutzte).
++**kopano-g1.yaml für Kopano <50 Users:**
++{{code language="yaml"}}
++apache::mod::prefork::maxclients: '384'
++apache::mod::prefork::serverlimit: '384'
++
++ld_kopano::server:
++  settings:
++    cache_cell_size: '512M'
++    cache_object_size: '16M'
++    cache_indexedobject_size: '32M'
++    enable_sql_procedures: 'yes'
++    # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
++    sync_gab_realtime: 'no'
++    softdelete_lifetime: '0'
++{{/code}}
++
++ **kopano-g1.yaml für Kopano >=50 Users**
++
++{{code language="yaml"}}
++apache::mod::prefork::maxclients: '500'
++apache::mod::prefork::serverlimit: '500'
++
++ld_kopano::server:
++  settings:
++    cache_cell_size: '6144M'
++    cache_object_size: '32M'
++    cache_indexedobject_size: '64M'
++    enable_sql_procedures: 'yes'
++    # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
++    sync_gab_realtime: 'no'
++    softdelete_lifetime: '0'
++{{/code}}
++
++**kopano-g1.yaml für Kopano >=200 Users**
++
++{{code language="yaml"}}
++apache::mod::prefork::maxclients: '500'
++apache::mod::prefork::serverlimit: '500'
++
++ld_kopano::server:
++  settings:
++    cache_cell_size: '12288M'
++    cache_object_size: '256M'
++    cache_indexedobject_size: '512M'
++    enable_sql_procedures: 'yes'
++    # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
++    sync_gab_realtime: 'no'
++    softdelete_lifetime: '0'
++{{/code}}
++
++(% id="cke_bm_884S" style="color:#000000; display:none" %) (% style="color:#000000" %)Zusätzlich muss im Kopano-Container ein neuer CronJob eingerichtet werden, sofern man im Abschnitt **ld_kopano::server** die Parameter  **sync_gab_realtime** /  **softdelete_lifetime** im deaktivierten Zustand eingetragen hat:
++
  {{code language="bash"}}
--ld_kopano::postfix::hashes:
--  '%{dir_etc}/sender_dependent_relayhost_maps_external.hash':
--    content: |
--      %{header}
--      <> smtp.meineschule.de
--      @meineschule.de smtp.meineschule.de
++root@kopano-g1:~ # /etc/cron.d/kopano-optimization
  {{/code}}
++{{code language="bash"}}
++# /etc/cron.d/kopano-optimization
++*/30 *  * * *     root   [ -x /usr/sbin/kopano-admin ] && /usr/sbin/kopano-admin --sync 2>&1 >/dev/null
++0 4  * * *     root   [ -x /usr/sbin/kopano-admin ] && /usr/sbin/kopano-admin --purge-softdelete 30 2>&1 >/dev/null
++{{/code}}
--===== **__Anbindung/Akkulaufzeit von Endgeräten verbessern__** =====
--Bei Verwendung des ActiveSync-Protokolls bzw. Kopano Z-Push zur Anbindung von Endgeräten (Smartphones, Tablets, MS Outlook 2013/2016/2019 Clients) empfiehlt es sich, auf die HTTP-KeepAlive Einstellungen für die Webserver-Dienste in der Verbindungskette (Rev-Proxy → Kopano-Server) Einfluss zu nehmen.
++===== __**1.2 mysql56(% style="color:#000000" %) Leistung verbessern(%%)**__ =====
--Der KeepAlive-Wert wird bewusst hoch gewählt, damit Verbindungen zwischen Client und Kopano-Server länger offen gehalten werden können. Dadurch schont man die Batterie und Laufzeit von mobilen Geräten, da es sich u.a. auf den Standby-Betrieb von Smartphones auswirkt (der nicht permanent unterbrochen wird zum Starten einer neuen Verbindung).
++(% style="color:#000000" %)Folgende Einstellung können für die mysql56.yaml gesetzt werden:
++{{code language="bash"}}
++root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/mysql56.yaml
++{{/code}}
--Zum erhöhen der TimeOuts öffnen Sie die kopano-g1.yaml:
++{{code language="yaml"}}
++mysql::server::override_options:
++  mysqldump:
++    max_allowed_packet: '1G'
++  mysqld:
++    innodb_file_per_table: true
++    bind-address: '0.0.0.0'
++    skip-name-resolve: true
++    innodb_large_prefix: true
++    innodb_file_format: 'Barracuda'
++    max_allowed_packet: '32M'
++    max_connections: '150'
++    query_cache_limit: '2M'
++    query_cache_size: '64M'
++    thread_stack: '512K'
++    tmp_table_size: '64M'
++    max_heap_table_size: '64M'
++    sort_buffer_size: '2M'
++    join_buffer_size: '2M'
++    table_open_cache: '500'
++    innodb_autoextend_increment: '1000'
++    innodb_buffer_pool_size: '2G'
++    innodb_flush_log_at_trx_commit: '2'
++    innodb_flush_method: 'O_DSYNC'
++    innodb_lock_wait_timeout: '120'
++    innodb_log_buffer_size: '8M'
++    innodb_log_file_size: '1G'
++    innodb_log_files_in_group: '3'
++    innodb_read_io_threads: '4'
++    innodb_write_io_threads: '4'
++{{/code}}
++
++===== __**1.3 mariadb103 (% style="color:#000000" %)Leistung verbessern(%%)**__ =====
++
++(% style="color:#000000" %)Folgende Einstellung können für die mariadb103.yaml gesetzt werden:
++
  {{code language="bash"}}
--root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
++root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/mariadb103.yaml
  {{/code}}
++{{code language="yaml"}}
++mysql::server::override_options:
++ mysqldump:
++   max_allowed_packet: '1G'
++ mysqld:
++   innodb_file_per_table: '1'
++   bind-address: '0.0.0.0'
++   skip-name-resolve: true
++   innodb_large_prefix: '1'
++   max_allowed_packet: '32M'
++   max_connections: '151'
++   query_cache_limit: '2M'
++   query_cache_size: '64M'
++   thread_stack: '512K'
++   tmp_table_size: '64M'
++   max_heap_table_size: '64M'
++   sort_buffer_size: '2M'
++   join_buffer_size: '2M'
++   table_open_cache: '500'
++   innodb_autoextend_increment: '1000'
++   innodb_buffer_pool_size: '1G'
++   # The following setting is based on the existing ibdata1 file, check current size and insert it here (rounded to MB)
++   innodb_data_file_path: 'ibdata1:12M:autoextend'
++   innodb_flush_log_at_trx_commit: '2'
++   innodb_flush_method: 'O_DSYNC'
++   innodb_lock_wait_timeout: '120'
++   innodb_log_buffer_size: '8M'
++   innodb_log_file_size: '1G'
++   innodb_log_files_in_group: '3'
++   innodb_read_io_threads: '4'
++   innodb_write_io_threads: '4'
++{{/code}}
--Fügen Sie folgende Zeilen am Ende der Datei ein:
++Passen Sie die {{code}}mariadb103.yaml{{/code}} noch folgendermaßen an für Große Umgebungen mit vielen Postfächern.
++**mariadb103.yaml für Kopano >= 50 Users:**
++
++{{code language="yaml"}}
++sort_buffer_size: '4M'
++innodb_buffer_pool_size: '2G'
++{{/code}}
++
++(% class="wikigeneratedid" %)
++Quelle: [[https:~~/~~/kb.kopano.io/pages/viewpage.action?pageId=2654253>>https://kb.kopano.io/pages/viewpage.action?pageId=2654253]]
++
++
++===== (% style="color:#000000" %)**__1.4 Anbindung/Akkulaufzeit von Endgeräten verbessern durch Konfiguration von HTTP KeepAlive__**(%%) =====
++
++(% style="color:#000000" %)Bei Verwendung des ActiveSync-Protokolls bzw. Kopano Z-Push zur Anbindung von Endgeräten (Smartphones, Tablets, MS Outlook 2013/2016/2019 Clients) empfiehlt es sich, auf die HTTP-KeepAlive Einstellungen für die Webserver-Dienste in der Verbindungskette (Rev-Proxy → Kopano-Server) Einfluss zu nehmen.
++
++(% style="color:#000000" %)Der KeepAlive-Wert wird bewusst hoch gewählt, damit Verbindungen zwischen Client und Kopano-Server länger offen gehalten werden können. Dadurch schont man die Batterie und Laufzeit von mobilen Geräten, da es sich u.a. auf den Standby-Betrieb von Smartphones auswirkt (der nicht permanent unterbrochen wird zum Starten einer neuen Verbindung).
++
++
++(% style="color:#000000" %)Bearbeiten Sie die Datei kopano-g1.yaml im puppeteer Container:
++
  {{code language="bash"}}
--apache::keepalive: 'On'
--apache::keepalive_timeout: '45'
--apache::max_keepalive_requests: '500'
--apache::mod::prefork::maxclients: '384'
--apache::mod::prefork::serverlimit: '384'
++root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
++{{/code}}
++(% style="color:#000000" %)Erweitern Sie die Datei um die folgenden Einstellungen:
++
++{{code language="yaml"}}
  nginx::keepalive_timeout: 3600
  nginx::keepalive_requests: 500
++
++apache::keepalive: 'On'
++apache::keepalive_timeout: '45'
++apache::max_keepalive_requests: '500'
  {{/code}}
--Zusätzlich müssen Sie die Datei rev-proxy.yaml erstellen/bearbeiten:
++(% style="color:#000000" %)Zusätzlich müssen Sie die Datei rev-proxy.yaml erstellen/bearbeiten und dort ebenfalls HTTP keepalive Einstellungen setzen:
  {{code language="bash"}}
  root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/rev-proxy.yaml
  {{/code}}
++(% style="color:#000000" %)Ergänzen/Befüllen Sie die Datei mit folgendem Inhalt:
--Ergänzen/Befüllen Sie die Datei mit folgendem Inhalt:
--
  {{code language="bash"}}
  nginx::keepalive_timeout: 3600
  nginx::keepalive_requests: 500
@@ -68,37 +68,38 @@
  {{/code}}
--===== **__Kopano Leistung verbessern__** =====
++==== (% style="color:#000000" %)**2. Allgemeine Optimierungen der Einstellungen**(%%) ====
--Kopano ist in der Standardinstallation lediglich für den Betrieb von 10 Benutzern ausgelegt. Das heißt, die Kopano-Serverdienste reservieren mit den Standardeinstellungen sehr wenig Systemressourcen (RAM) und die Plattform arbeitet als Konsequenz sehr langsam, wenn deutlich mehr Benutzer ein Postfach erhalten. Man sollte daher in den meisten Fällen die zugeteilten Systemressourcen (deutlich) erhöhen, um ein vernünftiges Nutzererlebnis zu erzielen.
--Um die Einstellungen Puppet-gerecht zu definieren, hilft nachfolgende Auflistung von YAML-Einstellungen. Bei der Auswahl der Werte muss man die **Hardware-Ressourcen** des Servers berücksichtigen, im Beispiel wird von einem leistungsstarken Server mit **32GB** **RAM** und **2 CPU-Sockets** und insgesamt **32 Kernen** ausgegangen.
++===== (% style="color:#000000" %)**__2.1 Zustellbarkeit der Unzustellbarkeits-Nachrichten verbessern durch Versenden per Relayhost__**(%%) =====
++(% style="color:#000000" %)Es ist möglich die Zustellbarkeit der Unzustellbarkeits-Nachrichten für den Absender zu verbessern. Dafür ist es notwendig den SMTP-Server des gewählten Mailproviders als Smarthost einzutragen.
--Bearbeiten Sie in die Datei kopano-g1.yaml im puppeteer Container:
++(% style="color:#000000" %)Bearbeiten Sie in die Datei kopano-g1.yaml im puppeteer Container:
++
  {{code language="bash"}}
  root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
  {{/code}}
++(% style="color:#000000" %)Die Zeile "ld_kopano::postfix::hashes:" beschreibt das Handling für den Null-Sender. Fügen Sie nun die Zeile "<> smtp.meineschule.de" ein (Ergänzen Sie die smtp Adresse durch die von ihnen genutzte).
--Folgende Parameter können ggf. helfen die Leistung zu verbessern:
--
  {{code language="bash"}}
--apache::keepalive: 'On'
--apache::keepalive_timeout: '45'
--apache::max_keepalive_requests: '500'
--apache::mod::prefork::maxclients: '500'
--apache::mod::prefork::serverlimit: '500'
++ld_kopano::postfix::hashes:
++  '%{dir_etc}/sender_dependent_relayhost_maps_external.hash':
++    content: |
++      %{header}
++      <> smtp.meineschule.de
++      @meineschule.de smtp.meineschule.de
++{{/code}}
--ld_kopano::server:
--  settings:
--    cache_cell_size: '6144M'
--    cache_object_size: '16M'
--    cache_indexedobject_size: '32M'
--    enable_sql_procedures: 'yes'
--   # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
--   sync_gab_realtime: 'no'
--    softdelete_lifetime: '0'
++
++===== (% style="color:#000000" %)__**2.2 Regelmäßige Synchronisation der Benutzer in das globale Adressbuch**__(%%) =====
++
++(% style="color:#000000" %)Durch einen Cronjob ist es möglich Benutzer in das Globale Adressbuch einzupflegen. Hierbei handelt es sich um eine Erweiterung für die Kopano Outlook Extension, damit Benutzer mit Kopano-Postfach automatisch im Adressbuch anwählbar sind.
++
++{{code language="bash"}}
++root@kopano-g1:~ # chmod +x /etc/cron.daily/gabsync
  {{/code}}
++(% style="color:#000000" %)__**Hinweis:**__ Dies stellt eine Erweiterung zum regulären ActiveSync-Protokoll durch Z-Push dar. Die Funktionsweise basiert auf einem synchronisierten Kontaktordner namens „Z-Push-KOE-GAB“ als Unterordner im Public Store / Öffentlichen Ordner.