Änderungen von Dokument Kopano Optimierungen

Zuletzt geändert von Jonas Mayer am 2022/05/23 12:53

Von 1.4 nach 1.5 Von 29.1 nach 30.1

Von Version 1.5

bearbeitet von Jens Gruber
am 2022/05/02 10:57

Änderungskommentar: Es gibt keinen Kommentar für diese Version

Auf Version 29.1

bearbeitet von Jonas Mayer
am 2022/05/23 12:47

Änderungskommentar: Es gibt keinen Kommentar für diese Version

Rohform
Im Layout

Zusammenfassung

Seiteneigenschaften (2 geändert, 0 hinzugefügt, 0 gelöscht)

Details

Seiteneigenschaften

Dokument-Autor

@@ -1,1 +1,1 @@
--XWiki.JensGruber@sbede
++XWiki.jonasmayer@sbede

Inhalt

@@ -1,104 +1,270 @@
--Es gibt mehrere Anpassungen die sich anbieten um den laufenden Betrieb von Kopano zu verbessern. Folgende Maßnahmen können optional genutzt werden:
++(% style="color:#000000" %)Es gibt mehrere Anpassungen, die sich anbieten, um den laufenden Betrieb von Kopano zu verbessern. Folgende Maßnahmen können optional genutzt werden:
++{{toc start="4"/}}
--===== **__Zustellbarkeit der Unzustellbarkeits-Nachrichten verbessern__** =====
--Es ist möglich die Zustellbarkeit der Unzustellbarkeits-Nachrichten für den Absender zu verbessern. Dafür ist es notwendig den SMTP-Server des gewählten Mailproviders als Smarthost einzutragen.
++==== **1. Performance-Optimierung** ====
--Bearbeiten Sie in die Datei kopano-g1.yaml im puppeteer Container:
++===== (% style="color:#000000" %)**__1.1 Kopano Leistung verbessern__**(%%) =====
++(% style="color:#000000" %)Kopano ist in der Standardinstallation lediglich für den Betrieb von 10 Benutzern ausgelegt. Das heißt, die Kopano-Serverdienste reservieren mit den Standardeinstellungen sehr wenig Systemressourcen (RAM) und die Plattform arbeitet als Konsequenz sehr langsam, wenn deutlich mehr Benutzer ein Postfach erhalten. Man sollte daher in den meisten Fällen die zugeteilten Systemressourcen (deutlich) erhöhen, um ein vernünftiges Nutzererlebnis zu erzielen.
++
++(% style="color:#000000" %)Um die Einstellungen Puppet-gerecht zu definieren, hilft nachfolgende Auflistung von YAML-Einstellungen. Bei der Auswahl der Werte muss man die **Hardware-Ressourcen** des Servers berücksichtigen, im Beispiel wird von einem leistungsstarken Server mit **32GB** **RAM** und **2 CPU-Sockets** und insgesamt **32 Kernen** ausgegangen.
++
++
++(% style="color:#000000" %)Bearbeiten Sie die Datei kopano-g1.yaml im puppeteer Container:
++
  {{code language="bash"}}
  root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
  {{/code}}
++Passen Sie die kopano-g1.yaml je nach Größe der Schule an.
--Die Zeile "ld_kopano::postfix::hashes:" beschreibt das Handling für den Null-Sender. Fügen Sie nun die Zeile "<> smtp.meineschule.de" ein (Ergänzen Sie die smtp Adresse durch die von ihnen genutzte).
++**kopano-g1.yaml für Kopano <50 Users:**
--{{code language="bash"}}
--ld_kopano::postfix::hashes:
--  '%{dir_etc}/sender_dependent_relayhost_maps_external.hash':
--    content: |
--      %{header}
--      <> smtp.meineschule.de
--      @meineschule.de smtp.meineschule.de
++{{code language="yaml"}}
++apache::mod::prefork::maxclients: '384'
++apache::mod::prefork::serverlimit: '384'
++
++ld_kopano::server:
++  settings:
++    cache_cell_size: '512M'
++    cache_object_size: '16M'
++    cache_indexedobject_size: '32M'
++    enable_sql_procedures: 'yes'
++    # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
++    sync_gab_realtime: 'no'
++    softdelete_lifetime: '0'
  {{/code}}
++ **kopano-g1.yaml für Kopano >=50 Users**
--===== **__Anbindung/Akkulaufzeit von Endgeräten verbessern__** =====
++{{code language="yaml"}}
++apache::mod::prefork::maxclients: '500'
++apache::mod::prefork::serverlimit: '500'
--Bei Verwendung des ActiveSync-Protokolls bzw. Kopano Z-Push zur Anbindung von Endgeräten (Smartphones, Tablets, MS Outlook 2013/2016/2019 Clients) empfiehlt es sich, auf die HTTP-KeepAlive Einstellungen für die Webserver-Dienste in der Verbindungskette (Rev-Proxy → Kopano-Server) Einfluss zu nehmen.
++ld_kopano::server:
++  settings:
++    cache_cell_size: '6144M'
++    cache_object_size: '32M'
++    cache_indexedobject_size: '64M'
++    enable_sql_procedures: 'yes'
++    # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
++    sync_gab_realtime: 'no'
++    softdelete_lifetime: '0'
++{{/code}}
--Der KeepAlive-Wert wird bewusst hoch gewählt, damit Verbindungen zwischen Client und Kopano-Server länger offen gehalten werden können. Dadurch schont man die Batterie und Laufzeit von mobilen Geräten, da es sich u.a. auf den Standby-Betrieb von Smartphones auswirkt (der nicht permanent unterbrochen wird zum Starten einer neuen Verbindung).
++**kopano-g1.yaml für Kopano >=200 Users**
++{{code language="yaml"}}
++apache::mod::prefork::maxclients: '500'
++apache::mod::prefork::serverlimit: '500'
--Zum erhöhen der TimeOuts öffnen Sie die kopano-g1.yaml:
++ld_kopano::server:
++  settings:
++    cache_cell_size: '12288M'
++    cache_object_size: '256M'
++    cache_indexedobject_size: '512M'
++    enable_sql_procedures: 'yes'
++    # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
++    sync_gab_realtime: 'no'
++    softdelete_lifetime: '0'
++{{/code}}
++(% id="cke_bm_884S" style="color:#000000; display:none" %) (% style="color:#000000" %)Zusätzlich muss im Kopano-Container ein neuer CronJob eingerichtet werden, sofern man im Abschnitt **ld_kopano::server** die Parameter  **sync_gab_realtime** /  **softdelete_lifetime** im deaktivierten Zustand eingetragen hat:
++
  {{code language="bash"}}
--root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
++root@kopano-g1:~ # /etc/cron.d/kopano-optimization
  {{/code}}
++{{code language="bash"}}
++# /etc/cron.d/kopano-optimization
++*/30 *  * * *     root   [ -x /usr/sbin/kopano-admin ] && /usr/sbin/kopano-admin --sync 2>&1 >/dev/null
++0 4  * * *     root   [ -x /usr/sbin/kopano-admin ] && /usr/sbin/kopano-admin --purge-softdelete 30 2>&1 >/dev/null
++{{/code}}
--Fügen Sie folgende Zeilen am Ende der Datei ein:
++===== __**1.2 mysql56(% style="color:#000000" %) Leistung verbessern(%%)**__ =====
++
++(% style="color:#000000" %)Folgende Einstellung können für die mysql56.yaml gesetzt werden:
++
  {{code language="bash"}}
--apache::keepalive: 'On'
--apache::keepalive_timeout: '45'
--apache::max_keepalive_requests: '500'
--apache::mod::prefork::maxclients: '384'
--apache::mod::prefork::serverlimit: '384'
++root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/mysql56.yaml
++{{/code}}
--nginx::keepalive_timeout: 3600
--nginx::keepalive_requests: 500
++{{code language="yaml"}}
++mysql::server::override_options:
++  mysqldump:
++    max_allowed_packet: '1G'
++  mysqld:
++    innodb_file_per_table: true
++    bind-address: '0.0.0.0'
++    skip-name-resolve: true
++    innodb_large_prefix: true
++    innodb_file_format: 'Barracuda'
++    max_allowed_packet: '32M'
++    max_connections: '150'
++    query_cache_limit: '2M'
++    query_cache_size: '64M'
++    thread_stack: '512K'
++    tmp_table_size: '64M'
++    max_heap_table_size: '64M'
++    sort_buffer_size: '2M'
++    join_buffer_size: '2M'
++    table_open_cache: '500'
++    innodb_autoextend_increment: '1000'
++    innodb_buffer_pool_size: '2G'
++    innodb_flush_log_at_trx_commit: '2'
++    innodb_flush_method: 'O_DSYNC'
++    innodb_lock_wait_timeout: '120'
++    innodb_log_buffer_size: '8M'
++    innodb_log_file_size: '1G'
++    innodb_log_files_in_group: '3'
++    innodb_read_io_threads: '4'
++    innodb_write_io_threads: '4'
  {{/code}}
--Zusätzlich müssen Sie die Datei rev-proxy.yaml erstellen/bearbeiten:
++===== __**1.3 mariadb103 (% style="color:#000000" %)Leistung verbessern(%%)**__ =====
++(% style="color:#000000" %)Folgende Einstellung können für die mariadb103.yaml gesetzt werden:
++
  {{code language="bash"}}
--root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/rev-proxy.yaml
++root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/mariadb103.yaml
  {{/code}}
++{{code language="yaml"}}
++mysql::server::override_options:
++ mysqldump:
++   max_allowed_packet: '1G'
++ mysqld:
++   innodb_file_per_table: '1'
++   bind-address: '0.0.0.0'
++   skip-name-resolve: true
++   innodb_large_prefix: '1'
++   max_allowed_packet: '32M'
++   max_connections: '151'
++   query_cache_limit: '2M'
++   query_cache_size: '64M'
++   thread_stack: '512K'
++   tmp_table_size: '64M'
++   max_heap_table_size: '64M'
++   sort_buffer_size: '2M'
++   join_buffer_size: '2M'
++   table_open_cache: '500'
++   innodb_autoextend_increment: '1000'
++   innodb_buffer_pool_size: '1G'
++   # The following setting is based on the existing ibdata1 file, check current size and insert it here (rounded to MB)
++   innodb_data_file_path: 'ibdata1:12M:autoextend'
++   innodb_flush_log_at_trx_commit: '2'
++   innodb_flush_method: 'O_DSYNC'
++   innodb_lock_wait_timeout: '120'
++   innodb_log_buffer_size: '8M'
++   innodb_log_file_size: '1G'
++   innodb_log_files_in_group: '3'
++   innodb_read_io_threads: '4'
++   innodb_write_io_threads: '4'
++{{/code}}
--Ergänzen/Befüllen Sie die Datei mit folgendem Inhalt:
++Passen Sie die {{code}}mariadb103.yaml{{/code}} noch folgendermaßen an für große Umgebungen mit vielen Postfächern.
--{{code language="bash"}}
--nginx::keepalive_timeout: 3600
--nginx::keepalive_requests: 500
++**mariadb103.yaml für Kopano >= 50 Users:**
++
++{{code language="yaml"}}
++sort_buffer_size: '4M'
++innodb_buffer_pool_size: '2G'
  {{/code}}
++(% class="wikigeneratedid" %)
++Quelle: [[https:~~/~~/kb.kopano.io/pages/viewpage.action?pageId=2654253>>https://kb.kopano.io/pages/viewpage.action?pageId=2654253]]
--===== **__Kopano Leistung verbessern__** =====
--Kopano ist in der Standardinstallation lediglich für den Betrieb von 10 Benutzern ausgelegt. Das heißt, die Kopano-Serverdienste reservieren mit den Standardeinstellungen sehr wenig Systemressourcen (RAM) und die Plattform arbeitet als Konsequenz sehr langsam, wenn deutlich mehr Benutzer ein Postfach erhalten. Man sollte daher in den meisten Fällen die zugeteilten Systemressourcen (deutlich) erhöhen, um ein vernünftiges Nutzererlebnis zu erzielen.
++==== (% style="color:#000000" %)**2. Allgemeine Optimierungen der Einstellungen**(%%) ====
--Um die Einstellungen Puppet-gerecht zu definieren, hilft nachfolgende Auflistung von YAML-Einstellungen. Bei der Auswahl der Werte muss man die **Hardware-Ressourcen** des Servers berücksichtigen, im Beispiel wird von einem leistungsstarken Server mit **32GB** **RAM** und **2 CPU-Sockets** und insgesamt **32 Kernen** ausgegangen.
++===== (% style="color:#000000" %)**__2.1 Zustellbarkeit der Unzustellbarkeits-Nachrichten verbessern durch Versenden per Relayhost__**(%%) =====
--Bearbeiten Sie in die Datei kopano-g1.yaml im puppeteer Container:
++(% style="color:#000000" %)Es ist möglich, die Zustellbarkeit der Unzustellbarkeits-Nachrichten für den Absender zu verbessern. Dafür ist es notwendig den SMTP-Server des gewählten Mailproviders als Smarthost einzutragen.
++
++(% style="color:#000000" %)Bearbeiten Sie dazu die Datei {{box}}kopano-g1.yaml{{/box}} im puppeteer Container:
++
  {{code language="bash"}}
  root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
  {{/code}}
++(% style="color:#000000" %)Im Abschnitt **ld_kopano::postfix::hashes:** kann eine zusätzliche Zeile für das Handling des Null-Senders hinzugefügt werden, den Postfix für Bounce-Nachrichten verwendet.
++Fügen Sie dort die Zeile "<> smtp.meineschule.de" zum Mapping hinzu und ersetzen Sie die SMTP-Adresse auf der rechten Seite durch den von Ihnen genutzten Smarthost.
--Folgende Parameter können ggf. helfen die Leistung zu verbessern:
++{{code language="bash"}}
++ld_kopano::postfix::hashes:
++  '%{dir_etc}/sender_dependent_relayhost_maps_external.hash':
++    content: |
++      %{header}
++      <> smtp.meineschule.de
++      @meineschule.de smtp.meineschule.de
++{{/code}}
++
++(% style="color:#000000" %)Darüber hinaus ist es in diesem Zuge empfehlenswert, im Vorhinein die Annahme von E-Mails durch den Kopano-Dienst **kopano-spooler **zu verweigern, die von fremden (also nicht intern genutzten) **__Absender__domänen** stammen.
++Dazu muss folgender Parameter abweichend zur Standardeinstellung in derselben Konfigurationsdatei {{box}}kopano-g1.yaml{{/box}} gesetzt werden:
++
++{{code language="yaml"}}
++# Disable mail redirects from foreign domains (sender) in Kopano
++ld_kopano::spooler:
++  settings:
++    allow_redirect_spoofing: 'no'
++{{/code}}
++
++(% style="color:#000000; font-size:12px" %)**Hinweis:** Weiterführende Informationen zur Einstellung können unter [[diesem Link>>http://manpages.ubuntu.com/manpages/impish/man5/kopano-spooler.cfg.5.html||rel="noopener noreferrer" target="_blank"]] nachgelesen werden.
++
++
++===== (% style="color:#000000" %)__**2.2 Regelmäßige Synchronisation der Benutzer in das globale Adressbuch**__(%%) =====
++
++(% style="color:#000000" %)Durch einen Cronjob ist es möglich Benutzer in das Globale Adressbuch einzupflegen. Hierbei handelt es sich um eine Erweiterung für die Kopano Outlook Extension, damit Benutzer mit Kopano-Postfach automatisch im Adressbuch anwählbar sind.
++
  {{code language="bash"}}
++root@kopano-g1:~ # chmod +x /etc/cron.daily/gabsync
++{{/code}}
++
++(% style="color:#000000" %)__**Hinweis:**__ Dies stellt eine Erweiterung zum regulären ActiveSync-Protokoll durch Z-Push dar. Die Funktionsweise basiert auf einem synchronisierten Kontaktordner namens „Z-Push-KOE-GAB“ als Unterordner im Public Store / Öffentlichen Ordner.
++
++
++===== (% style="color:#000000" %)**__2.3 Anbindung/Akkulaufzeit von Endgeräten verbessern durch Konfiguration von HTTP KeepAlive__**(%%) =====
++
++(% style="color:#000000" %)Bei Verwendung des ActiveSync-Protokolls bzw. Kopano Z-Push zur Anbindung von Endgeräten (Smartphones, Tablets, MS Outlook 2013/2016/2019 Clients) empfiehlt es sich, auf die HTTP-KeepAlive Einstellungen für die Webserver-Dienste in der Verbindungskette (Rev-Proxy → Kopano-Server) Einfluss zu nehmen.
++
++(% style="color:#000000" %)Der KeepAlive-Wert wird bewusst hoch gewählt, damit Verbindungen zwischen Client und Kopano-Server länger offen gehalten werden können. Dadurch schont man die Batterie und Laufzeit von mobilen Geräten, da es sich u.a. auf den Standby-Betrieb von Smartphones auswirkt (der nicht permanent unterbrochen wird zum Starten einer neuen Verbindung).
++
++
++(% style="color:#000000" %)Bearbeiten Sie die Datei kopano-g1.yaml im puppeteer Container:
++
++{{code language="bash"}}
++root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
++{{/code}}
++
++(% style="color:#000000" %)Erweitern Sie die Datei um die folgenden Einstellungen:
++
++{{code language="yaml"}}
++nginx::keepalive_timeout: 3600
++nginx::keepalive_requests: 500
++
  apache::keepalive: 'On'
  apache::keepalive_timeout: '45'
  apache::max_keepalive_requests: '500'
--apache::mod::prefork::maxclients: '500'
--apache::mod::prefork::serverlimit: '500'
++{{/code}}
--ld_kopano::server:
--  settings:
--    cache_cell_size: '6144M'
--    cache_object_size: '16M'
--    cache_indexedobject_size: '32M'
--    enable_sql_procedures: 'yes'
--   # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
--   sync_gab_realtime: 'no'
--    softdelete_lifetime: '0'
++
++(% style="color:#000000" %)Zusätzlich müssen Sie die Datei rev-proxy.yaml erstellen/bearbeiten und dort ebenfalls HTTP KeepAlive Einstellungen setzen:
++
++{{code language="bash"}}
++root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/rev-proxy.yaml
  {{/code}}
++(% style="color:#000000" %)Ergänzen/Befüllen Sie die Datei mit folgendem Inhalt:
++
++{{code language="bash"}}
++nginx::keepalive_timeout: 3600
++nginx::keepalive_requests: 500
++{{/code}}