Änderungen von Dokument Kopano Optimierungen

Zuletzt geändert von Jonas Mayer am 2022/05/23 12:53

Von 1.5 nach 1.4 Von 29.1 nach 28.1

Von Version 28.1

bearbeitet von Jonas Mayer
am 2022/05/23 12:45

Änderungskommentar: Es gibt keinen Kommentar für diese Version

Auf Version 1.5

bearbeitet von Jens Gruber
am 2022/05/02 10:57

Änderungskommentar: Es gibt keinen Kommentar für diese Version

Rohform
Im Layout

Zusammenfassung

Seiteneigenschaften (2 geändert, 0 hinzugefügt, 0 gelöscht)

Details

Seiteneigenschaften

Dokument-Autor

@@ -1,1 +1,1 @@
--XWiki.jonasmayer@sbede
++XWiki.JensGruber@sbede

Inhalt

@@ -1,270 +1,104 @@
--(% style="color:#000000" %)Es gibt mehrere Anpassungen, die sich anbieten, um den laufenden Betrieb von Kopano zu verbessern. Folgende Maßnahmen können optional genutzt werden:
++Es gibt mehrere Anpassungen die sich anbieten um den laufenden Betrieb von Kopano zu verbessern. Folgende Maßnahmen können optional genutzt werden:
--{{toc start="4"/}}
++===== **__Zustellbarkeit der Unzustellbarkeits-Nachrichten verbessern__** =====
--==== **1. Performance-Optimierung** ====
++Es ist möglich die Zustellbarkeit der Unzustellbarkeits-Nachrichten für den Absender zu verbessern. Dafür ist es notwendig den SMTP-Server des gewählten Mailproviders als Smarthost einzutragen.
--===== (% style="color:#000000" %)**__1.1 Kopano Leistung verbessern__**(%%) =====
++Bearbeiten Sie in die Datei kopano-g1.yaml im puppeteer Container:
--(% style="color:#000000" %)Kopano ist in der Standardinstallation lediglich für den Betrieb von 10 Benutzern ausgelegt. Das heißt, die Kopano-Serverdienste reservieren mit den Standardeinstellungen sehr wenig Systemressourcen (RAM) und die Plattform arbeitet als Konsequenz sehr langsam, wenn deutlich mehr Benutzer ein Postfach erhalten. Man sollte daher in den meisten Fällen die zugeteilten Systemressourcen (deutlich) erhöhen, um ein vernünftiges Nutzererlebnis zu erzielen.
--
--(% style="color:#000000" %)Um die Einstellungen Puppet-gerecht zu definieren, hilft nachfolgende Auflistung von YAML-Einstellungen. Bei der Auswahl der Werte muss man die **Hardware-Ressourcen** des Servers berücksichtigen, im Beispiel wird von einem leistungsstarken Server mit **32GB** **RAM** und **2 CPU-Sockets** und insgesamt **32 Kernen** ausgegangen.
--
--
--(% style="color:#000000" %)Bearbeiten Sie die Datei kopano-g1.yaml im puppeteer Container:
--
  {{code language="bash"}}
  root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
  {{/code}}
--Passen Sie die kopano-g1.yaml je nach Größe der Schule an.
--**kopano-g1.yaml für Kopano <50 Users:**
++Die Zeile "ld_kopano::postfix::hashes:" beschreibt das Handling für den Null-Sender. Fügen Sie nun die Zeile "<> smtp.meineschule.de" ein (Ergänzen Sie die smtp Adresse durch die von ihnen genutzte).
--{{code language="yaml"}}
--apache::mod::prefork::maxclients: '384'
--apache::mod::prefork::serverlimit: '384'
--
--ld_kopano::server:
--  settings:
--    cache_cell_size: '512M'
--    cache_object_size: '16M'
--    cache_indexedobject_size: '32M'
--    enable_sql_procedures: 'yes'
--    # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
--    sync_gab_realtime: 'no'
--    softdelete_lifetime: '0'
++{{code language="bash"}}
++ld_kopano::postfix::hashes:
++  '%{dir_etc}/sender_dependent_relayhost_maps_external.hash':
++    content: |
++      %{header}
++      <> smtp.meineschule.de
++      @meineschule.de smtp.meineschule.de
  {{/code}}
-- **kopano-g1.yaml für Kopano >=50 Users**
--{{code language="yaml"}}
--apache::mod::prefork::maxclients: '500'
--apache::mod::prefork::serverlimit: '500'
++===== **__Anbindung/Akkulaufzeit von Endgeräten verbessern__** =====
--ld_kopano::server:
--  settings:
--    cache_cell_size: '6144M'
--    cache_object_size: '32M'
--    cache_indexedobject_size: '64M'
--    enable_sql_procedures: 'yes'
--    # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
--    sync_gab_realtime: 'no'
--    softdelete_lifetime: '0'
--{{/code}}
++Bei Verwendung des ActiveSync-Protokolls bzw. Kopano Z-Push zur Anbindung von Endgeräten (Smartphones, Tablets, MS Outlook 2013/2016/2019 Clients) empfiehlt es sich, auf die HTTP-KeepAlive Einstellungen für die Webserver-Dienste in der Verbindungskette (Rev-Proxy → Kopano-Server) Einfluss zu nehmen.
--**kopano-g1.yaml für Kopano >=200 Users**
++Der KeepAlive-Wert wird bewusst hoch gewählt, damit Verbindungen zwischen Client und Kopano-Server länger offen gehalten werden können. Dadurch schont man die Batterie und Laufzeit von mobilen Geräten, da es sich u.a. auf den Standby-Betrieb von Smartphones auswirkt (der nicht permanent unterbrochen wird zum Starten einer neuen Verbindung).
--{{code language="yaml"}}
--apache::mod::prefork::maxclients: '500'
--apache::mod::prefork::serverlimit: '500'
--ld_kopano::server:
--  settings:
--    cache_cell_size: '12288M'
--    cache_object_size: '256M'
--    cache_indexedobject_size: '512M'
--    enable_sql_procedures: 'yes'
--    # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
--    sync_gab_realtime: 'no'
--    softdelete_lifetime: '0'
--{{/code}}
++Zum erhöhen der TimeOuts öffnen Sie die kopano-g1.yaml:
--(% id="cke_bm_884S" style="color:#000000; display:none" %) (% style="color:#000000" %)Zusätzlich muss im Kopano-Container ein neuer CronJob eingerichtet werden, sofern man im Abschnitt **ld_kopano::server** die Parameter  **sync_gab_realtime** /  **softdelete_lifetime** im deaktivierten Zustand eingetragen hat:
--
  {{code language="bash"}}
--root@kopano-g1:~ # /etc/cron.d/kopano-optimization
++root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
  {{/code}}
--{{code language="bash"}}
--# /etc/cron.d/kopano-optimization
--*/30 *  * * *     root   [ -x /usr/sbin/kopano-admin ] && /usr/sbin/kopano-admin --sync 2>&1 >/dev/null
--0 4  * * *     root   [ -x /usr/sbin/kopano-admin ] && /usr/sbin/kopano-admin --purge-softdelete 30 2>&1 >/dev/null
--{{/code}}
++Fügen Sie folgende Zeilen am Ende der Datei ein:
--===== __**1.2 mysql56(% style="color:#000000" %) Leistung verbessern(%%)**__ =====
--
--(% style="color:#000000" %)Folgende Einstellung können für die mysql56.yaml gesetzt werden:
--
  {{code language="bash"}}
--root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/mysql56.yaml
--{{/code}}
++apache::keepalive: 'On'
++apache::keepalive_timeout: '45'
++apache::max_keepalive_requests: '500'
++apache::mod::prefork::maxclients: '384'
++apache::mod::prefork::serverlimit: '384'
--{{code language="yaml"}}
--mysql::server::override_options:
--  mysqldump:
--    max_allowed_packet: '1G'
--  mysqld:
--    innodb_file_per_table: true
--    bind-address: '0.0.0.0'
--    skip-name-resolve: true
--    innodb_large_prefix: true
--    innodb_file_format: 'Barracuda'
--    max_allowed_packet: '32M'
--    max_connections: '150'
--    query_cache_limit: '2M'
--    query_cache_size: '64M'
--    thread_stack: '512K'
--    tmp_table_size: '64M'
--    max_heap_table_size: '64M'
--    sort_buffer_size: '2M'
--    join_buffer_size: '2M'
--    table_open_cache: '500'
--    innodb_autoextend_increment: '1000'
--    innodb_buffer_pool_size: '2G'
--    innodb_flush_log_at_trx_commit: '2'
--    innodb_flush_method: 'O_DSYNC'
--    innodb_lock_wait_timeout: '120'
--    innodb_log_buffer_size: '8M'
--    innodb_log_file_size: '1G'
--    innodb_log_files_in_group: '3'
--    innodb_read_io_threads: '4'
--    innodb_write_io_threads: '4'
++nginx::keepalive_timeout: 3600
++nginx::keepalive_requests: 500
  {{/code}}
--===== __**1.3 mariadb103 (% style="color:#000000" %)Leistung verbessern(%%)**__ =====
++Zusätzlich müssen Sie die Datei rev-proxy.yaml erstellen/bearbeiten:
--(% style="color:#000000" %)Folgende Einstellung können für die mariadb103.yaml gesetzt werden:
--
  {{code language="bash"}}
--root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/mariadb103.yaml
++root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/rev-proxy.yaml
  {{/code}}
--{{code language="yaml"}}
--mysql::server::override_options:
-- mysqldump:
--   max_allowed_packet: '1G'
-- mysqld:
--   innodb_file_per_table: '1'
--   bind-address: '0.0.0.0'
--   skip-name-resolve: true
--   innodb_large_prefix: '1'
--   max_allowed_packet: '32M'
--   max_connections: '151'
--   query_cache_limit: '2M'
--   query_cache_size: '64M'
--   thread_stack: '512K'
--   tmp_table_size: '64M'
--   max_heap_table_size: '64M'
--   sort_buffer_size: '2M'
--   join_buffer_size: '2M'
--   table_open_cache: '500'
--   innodb_autoextend_increment: '1000'
--   innodb_buffer_pool_size: '1G'
--   # The following setting is based on the existing ibdata1 file, check current size and insert it here (rounded to MB)
--   innodb_data_file_path: 'ibdata1:12M:autoextend'
--   innodb_flush_log_at_trx_commit: '2'
--   innodb_flush_method: 'O_DSYNC'
--   innodb_lock_wait_timeout: '120'
--   innodb_log_buffer_size: '8M'
--   innodb_log_file_size: '1G'
--   innodb_log_files_in_group: '3'
--   innodb_read_io_threads: '4'
--   innodb_write_io_threads: '4'
--{{/code}}
--Passen Sie die {{code}}mariadb103.yaml{{/code}} noch folgendermaßen an für große Umgebungen mit vielen Postfächern.
++Ergänzen/Befüllen Sie die Datei mit folgendem Inhalt:
--**mariadb103.yaml für Kopano >= 50 Users:**
--
--{{code language="yaml"}}
--sort_buffer_size: '4M'
--innodb_buffer_pool_size: '2G'
--{{/code}}
--
--(% class="wikigeneratedid" %)
--Quelle: [[https:~~/~~/kb.kopano.io/pages/viewpage.action?pageId=2654253>>https://kb.kopano.io/pages/viewpage.action?pageId=2654253]]
--
--
--==== (% style="color:#000000" %)**2. Allgemeine Optimierungen der Einstellungen**(%%) ====
--
--
--===== (% style="color:#000000" %)**__2.1 Zustellbarkeit der Unzustellbarkeits-Nachrichten verbessern durch Versenden per Relayhost__**(%%) =====
--
--(% style="color:#000000" %)Es ist möglich, die Zustellbarkeit der Unzustellbarkeits-Nachrichten für den Absender zu verbessern. Dafür ist es notwendig den SMTP-Server des gewählten Mailproviders als Smarthost einzutragen.
--
--
--(% style="color:#000000" %)Bearbeiten Sie dazu die Datei {{box}}kopano-g1.yaml{{/box}} im puppeteer Container:
--
  {{code language="bash"}}
--root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
++nginx::keepalive_timeout: 3600
++nginx::keepalive_requests: 500
  {{/code}}
--(% style="color:#000000" %)Im Abschnitt **ld_kopano::postfix::hashes:** kann eine zusätzliche Zeile für das Handling des Null-Senders hinzugefügt werden, den Postfix für Bounce-Nachrichten verwendet.
--Fügen Sie dort die Zeile "<> smtp.meineschule.de" zum Mapping hinzu und ersetzen Sie die SMTP-Adresse auf der rechten Seite durch den von Ihnen genutzten Smarthost.
--{{code language="bash"}}
--ld_kopano::postfix::hashes:
--  '%{dir_etc}/sender_dependent_relayhost_maps_external.hash':
--    content: |
--      %{header}
--      <> smtp.meineschule.de
--      @meineschule.de smtp.meineschule.de
--{{/code}}
++===== **__Kopano Leistung verbessern__** =====
++Kopano ist in der Standardinstallation lediglich für den Betrieb von 10 Benutzern ausgelegt. Das heißt, die Kopano-Serverdienste reservieren mit den Standardeinstellungen sehr wenig Systemressourcen (RAM) und die Plattform arbeitet als Konsequenz sehr langsam, wenn deutlich mehr Benutzer ein Postfach erhalten. Man sollte daher in den meisten Fällen die zugeteilten Systemressourcen (deutlich) erhöhen, um ein vernünftiges Nutzererlebnis zu erzielen.
--(% style="color:#000000" %)Darüber hinaus ist es empfehlenswert, im Vorhinein durch den Kopano-Dienst **kopano-spooler** die Annahme von E-Mails zu verweigern, die von fremden (d.h. nicht intern definierten) **__Absender__domänen** stammen.
--Dazu muss folgender Parameter abweichend zur Standardeinstellung in derselben Konfigurationsdatei {{box}}kopano-g1.yaml{{/box}} definiert werden:
++Um die Einstellungen Puppet-gerecht zu definieren, hilft nachfolgende Auflistung von YAML-Einstellungen. Bei der Auswahl der Werte muss man die **Hardware-Ressourcen** des Servers berücksichtigen, im Beispiel wird von einem leistungsstarken Server mit **32GB** **RAM** und **2 CPU-Sockets** und insgesamt **32 Kernen** ausgegangen.
--{{code language="yaml"}}
--# Disable mail redirects from foreign domains (sender) in Kopano
--ld_kopano::spooler:
--  settings:
--    allow_redirect_spoofing: 'no'
--{{/code}}
--(% style="font-size: 12px; color: rgb(0, 0, 0)" %)**Hinweis:** Weiterführende Informationen zur Einstellung können unter [[diesem Link>>http://manpages.ubuntu.com/manpages/impish/man5/kopano-spooler.cfg.5.html||target="_blank"]] nachgelesen werden.
++Bearbeiten Sie in die Datei kopano-g1.yaml im puppeteer Container:
--
--===== (% style="color:#000000" %)__**2.2 Regelmäßige Synchronisation der Benutzer in das globale Adressbuch**__(%%) =====
--
--(% style="color:#000000" %)Durch einen Cronjob ist es möglich Benutzer in das Globale Adressbuch einzupflegen. Hierbei handelt es sich um eine Erweiterung für die Kopano Outlook Extension, damit Benutzer mit Kopano-Postfach automatisch im Adressbuch anwählbar sind.
--
  {{code language="bash"}}
--root@kopano-g1:~ # chmod +x /etc/cron.daily/gabsync
--{{/code}}
--
--(% style="color:#000000" %)__**Hinweis:**__ Dies stellt eine Erweiterung zum regulären ActiveSync-Protokoll durch Z-Push dar. Die Funktionsweise basiert auf einem synchronisierten Kontaktordner namens „Z-Push-KOE-GAB“ als Unterordner im Public Store / Öffentlichen Ordner.
--
--
--===== (% style="color:#000000" %)**__2.3 Anbindung/Akkulaufzeit von Endgeräten verbessern durch Konfiguration von HTTP KeepAlive__**(%%) =====
--
--(% style="color:#000000" %)Bei Verwendung des ActiveSync-Protokolls bzw. Kopano Z-Push zur Anbindung von Endgeräten (Smartphones, Tablets, MS Outlook 2013/2016/2019 Clients) empfiehlt es sich, auf die HTTP-KeepAlive Einstellungen für die Webserver-Dienste in der Verbindungskette (Rev-Proxy → Kopano-Server) Einfluss zu nehmen.
--
--(% style="color:#000000" %)Der KeepAlive-Wert wird bewusst hoch gewählt, damit Verbindungen zwischen Client und Kopano-Server länger offen gehalten werden können. Dadurch schont man die Batterie und Laufzeit von mobilen Geräten, da es sich u.a. auf den Standby-Betrieb von Smartphones auswirkt (der nicht permanent unterbrochen wird zum Starten einer neuen Verbindung).
--
--
--(% style="color:#000000" %)Bearbeiten Sie die Datei kopano-g1.yaml im puppeteer Container:
--
--{{code language="bash"}}
  root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
  {{/code}}
--(% style="color:#000000" %)Erweitern Sie die Datei um die folgenden Einstellungen:
--{{code language="yaml"}}
--nginx::keepalive_timeout: 3600
--nginx::keepalive_requests: 500
++Folgende Parameter können ggf. helfen die Leistung zu verbessern:
++{{code language="bash"}}
  apache::keepalive: 'On'
  apache::keepalive_timeout: '45'
  apache::max_keepalive_requests: '500'
--{{/code}}
++apache::mod::prefork::maxclients: '500'
++apache::mod::prefork::serverlimit: '500'
--
--(% style="color:#000000" %)Zusätzlich müssen Sie die Datei rev-proxy.yaml erstellen/bearbeiten und dort ebenfalls HTTP KeepAlive Einstellungen setzen:
--
--{{code language="bash"}}
--root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/rev-proxy.yaml
++ld_kopano::server:
++  settings:
++    cache_cell_size: '6144M'
++    cache_object_size: '16M'
++    cache_indexedobject_size: '32M'
++    enable_sql_procedures: 'yes'
++   # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
++   sync_gab_realtime: 'no'
++    softdelete_lifetime: '0'
  {{/code}}
--(% style="color:#000000" %)Ergänzen/Befüllen Sie die Datei mit folgendem Inhalt:
--
--{{code language="bash"}}
--nginx::keepalive_timeout: 3600
--nginx::keepalive_requests: 500
--{{/code}}