Wiki-Quellcode von Kopano Optimierungen

Zuletzt geändert von Jonas Mayer am 2022/05/23 12:53

Verstecke letzte Bearbeiter
jonasmayer@sbede 27.1 1 (% style="color:#000000" %)Es gibt mehrere Anpassungen, die sich anbieten, um den laufenden Betrieb von Kopano zu verbessern. Folgende Maßnahmen können optional genutzt werden:
Jens Gruber 1.1 2
jonasmayer@sbede 18.1 3 {{toc start="4"/}}
Jens Gruber 1.1 4
Jens Gruber 2.2 5
cge@sbede 17.1 6 ==== **1. Performance-Optimierung** ====
Jens Gruber 1.1 7
8
cge@sbede 16.1 9 ===== (% style="color:#000000" %)**__1.1 Kopano Leistung verbessern__**(%%) =====
Jens Gruber 1.1 10
Jens Gruber 3.1 11 (% style="color:#000000" %)Kopano ist in der Standardinstallation lediglich für den Betrieb von 10 Benutzern ausgelegt. Das heißt, die Kopano-Serverdienste reservieren mit den Standardeinstellungen sehr wenig Systemressourcen (RAM) und die Plattform arbeitet als Konsequenz sehr langsam, wenn deutlich mehr Benutzer ein Postfach erhalten. Man sollte daher in den meisten Fällen die zugeteilten Systemressourcen (deutlich) erhöhen, um ein vernünftiges Nutzererlebnis zu erzielen.
Jens Gruber 1.5 12
Jens Gruber 3.1 13 (% style="color:#000000" %)Um die Einstellungen Puppet-gerecht zu definieren, hilft nachfolgende Auflistung von YAML-Einstellungen. Bei der Auswahl der Werte muss man die **Hardware-Ressourcen** des Servers berücksichtigen, im Beispiel wird von einem leistungsstarken Server mit **32GB** **RAM** und **2 CPU-Sockets** und insgesamt **32 Kernen** ausgegangen.
Jens Gruber 1.5 14
15
cge@sbede 23.1 16 (% style="color:#000000" %)Bearbeiten Sie die Datei kopano-g1.yaml im puppeteer Container:
Jens Gruber 1.5 17
18 {{code language="bash"}}
19 root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
20 {{/code}}
21
cge@sbede 7.1 22 Passen Sie die kopano-g1.yaml je nach Größe der Schule an.
Jens Gruber 1.5 23
cge@sbede 7.1 24 **kopano-g1.yaml für Kopano <50 Users:**
Jens Gruber 1.5 25
Christian Germann 4.1 26 {{code language="yaml"}}
cge@sbede 7.1 27 apache::mod::prefork::maxclients: '384'
28 apache::mod::prefork::serverlimit: '384'
Jens Gruber 1.5 29
30 ld_kopano::server:
Christian Germann 4.1 31 settings:
32 cache_cell_size: '512M'
33 cache_object_size: '16M'
34 cache_indexedobject_size: '32M'
35 enable_sql_procedures: 'yes'
36 # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
37 sync_gab_realtime: 'no'
38 softdelete_lifetime: '0'
cge@sbede 7.1 39 {{/code}}
Christian Germann 4.1 40
cge@sbede 7.1 41 **kopano-g1.yaml für Kopano >=50 Users**
42
43 {{code language="yaml"}}
44 apache::mod::prefork::maxclients: '500'
45 apache::mod::prefork::serverlimit: '500'
46
Christian Germann 4.1 47 ld_kopano::server:
48 settings:
49 cache_cell_size: '6144M'
50 cache_object_size: '32M'
51 cache_indexedobject_size: '64M'
52 enable_sql_procedures: 'yes'
53 # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
54 sync_gab_realtime: 'no'
55 softdelete_lifetime: '0'
cge@sbede 7.1 56 {{/code}}
Christian Germann 4.1 57
cge@sbede 7.1 58 **kopano-g1.yaml für Kopano >=200 Users**
59
60 {{code language="yaml"}}
61 apache::mod::prefork::maxclients: '500'
62 apache::mod::prefork::serverlimit: '500'
63
Christian Germann 4.1 64 ld_kopano::server:
65 settings:
66 cache_cell_size: '12288M'
67 cache_object_size: '256M'
68 cache_indexedobject_size: '512M'
69 enable_sql_procedures: 'yes'
70 # The following 2 settings require a cronjob to run periodically instead (in case the value is disabled)
71 sync_gab_realtime: 'no'
72 softdelete_lifetime: '0'
Jens Gruber 1.5 73 {{/code}}
74
cge@sbede 21.1 75 (% id="cke_bm_884S" style="color:#000000; display:none" %) (% style="color:#000000" %)Zusätzlich muss im Kopano-Container ein neuer CronJob eingerichtet werden, sofern man im Abschnitt **ld_kopano::server** die Parameter **sync_gab_realtime** / **softdelete_lifetime** im deaktivierten Zustand eingetragen hat:
Jens Gruber 1.6 76
77 {{code language="bash"}}
78 root@kopano-g1:~ # /etc/cron.d/kopano-optimization
79 {{/code}}
80
81 {{code language="bash"}}
82 # /etc/cron.d/kopano-optimization
83 */30 *  * * *     root   [ -x /usr/sbin/kopano-admin ] && /usr/sbin/kopano-admin --sync 2>&1 >/dev/null
84 0 4  * * *     root   [ -x /usr/sbin/kopano-admin ] && /usr/sbin/kopano-admin --purge-softdelete 30 2>&1 >/dev/null
85 {{/code}}
86
87
cge@sbede 16.1 88 ===== __**1.2 mysql56(% style="color:#000000" %) Leistung verbessern(%%)**__ =====
cge@sbede 7.1 89
Jens Gruber 3.1 90 (% style="color:#000000" %)Folgende Einstellung können für die mysql56.yaml gesetzt werden:
Jens Gruber 1.6 91
92 {{code language="bash"}}
93 root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/mysql56.yaml
94 {{/code}}
95
Christian Germann 4.1 96 {{code language="yaml"}}
Jens Gruber 1.6 97 mysql::server::override_options:
98 mysqldump:
99 max_allowed_packet: '1G'
100 mysqld:
101 innodb_file_per_table: true
102 bind-address: '0.0.0.0'
103 skip-name-resolve: true
104 innodb_large_prefix: true
105 innodb_file_format: 'Barracuda'
cge@sbede 12.1 106 max_allowed_packet: '32M'
Jens Gruber 1.6 107 max_connections: '150'
108 query_cache_limit: '2M'
109 query_cache_size: '64M'
110 thread_stack: '512K'
111 tmp_table_size: '64M'
112 max_heap_table_size: '64M'
113 sort_buffer_size: '2M'
114 join_buffer_size: '2M'
115 table_open_cache: '500'
116 innodb_autoextend_increment: '1000'
117 innodb_buffer_pool_size: '2G'
118 innodb_flush_log_at_trx_commit: '2'
119 innodb_flush_method: 'O_DSYNC'
120 innodb_lock_wait_timeout: '120'
121 innodb_log_buffer_size: '8M'
122 innodb_log_file_size: '1G'
123 innodb_log_files_in_group: '3'
124 innodb_read_io_threads: '4'
125 innodb_write_io_threads: '4'
126 {{/code}}
127
Jens Gruber 1.8 128
cge@sbede 16.1 129 ===== __**1.3 mariadb103 (% style="color:#000000" %)Leistung verbessern(%%)**__ =====
cge@sbede 12.1 130
131 (% style="color:#000000" %)Folgende Einstellung können für die mariadb103.yaml gesetzt werden:
132
Christian Germann 4.1 133 {{code language="bash"}}
134 root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/mariadb103.yaml
135 {{/code}}
Jens Gruber 1.8 136
Christian Germann 4.1 137 {{code language="yaml"}}
138 mysql::server::override_options:
139 mysqldump:
140 max_allowed_packet: '1G'
141 mysqld:
142 innodb_file_per_table: '1'
143 bind-address: '0.0.0.0'
144 skip-name-resolve: true
145 innodb_large_prefix: '1'
cge@sbede 12.1 146 max_allowed_packet: '32M'
Christian Germann 4.1 147 max_connections: '151'
148 query_cache_limit: '2M'
149 query_cache_size: '64M'
150 thread_stack: '512K'
151 tmp_table_size: '64M'
152 max_heap_table_size: '64M'
153 sort_buffer_size: '2M'
154 join_buffer_size: '2M'
155 table_open_cache: '500'
156 innodb_autoextend_increment: '1000'
157 innodb_buffer_pool_size: '1G'
158 # The following setting is based on the existing ibdata1 file, check current size and insert it here (rounded to MB)
159 innodb_data_file_path: 'ibdata1:12M:autoextend'
160 innodb_flush_log_at_trx_commit: '2'
161 innodb_flush_method: 'O_DSYNC'
162 innodb_lock_wait_timeout: '120'
163 innodb_log_buffer_size: '8M'
164 innodb_log_file_size: '1G'
165 innodb_log_files_in_group: '3'
166 innodb_read_io_threads: '4'
167 innodb_write_io_threads: '4'
168 {{/code}}
Jens Gruber 1.8 169
jonasmayer@sbede 26.1 170 Passen Sie die {{code}}mariadb103.yaml{{/code}} noch folgendermaßen an für große Umgebungen mit vielen Postfächern.
Jens Gruber 1.8 171
Christian Germann 4.1 172 **mariadb103.yaml für Kopano >= 50 Users:**
Jens Gruber 1.8 173
Christian Germann 4.1 174 {{code language="yaml"}}
175 sort_buffer_size: '4M'
176 innodb_buffer_pool_size: '2G'
Jens Gruber 1.8 177 {{/code}}
178
cge@sbede 14.1 179 (% class="wikigeneratedid" %)
180 Quelle: [[https:~~/~~/kb.kopano.io/pages/viewpage.action?pageId=2654253>>https://kb.kopano.io/pages/viewpage.action?pageId=2654253]]
181
182
jonasmayer@sbede 25.1 183 ==== (% style="color:#000000" %)**2. Allgemeine Optimierungen der Einstellungen**(%%) ====
cge@sbede 7.1 184
185
jonasmayer@sbede 25.1 186 ===== (% style="color:#000000" %)**__2.1 Zustellbarkeit der Unzustellbarkeits-Nachrichten verbessern durch Versenden per Relayhost__**(%%) =====
cge@sbede 7.1 187
jonasmayer@sbede 28.1 188 (% style="color:#000000" %)Es ist möglich, die Zustellbarkeit der Unzustellbarkeits-Nachrichten für den Absender zu verbessern. Dafür ist es notwendig den SMTP-Server des gewählten Mailproviders als Smarthost einzutragen.
cge@sbede 7.1 189
jonasmayer@sbede 18.1 190
jonasmayer@sbede 28.1 191 (% style="color:#000000" %)Bearbeiten Sie dazu die Datei {{box}}kopano-g1.yaml{{/box}} im puppeteer Container:
jonasmayer@sbede 25.1 192
cge@sbede 23.1 193 {{code language="bash"}}
194 root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
195 {{/code}}
jonasmayer@sbede 18.1 196
jonasmayer@sbede 28.1 197 (% style="color:#000000" %)Im Abschnitt **ld_kopano::postfix::hashes:** kann eine zusätzliche Zeile für das Handling des Null-Senders hinzugefügt werden, den Postfix für Bounce-Nachrichten verwendet.
198 Fügen Sie dort die Zeile "<> smtp.meineschule.de" zum Mapping hinzu und ersetzen Sie die SMTP-Adresse auf der rechten Seite durch den von Ihnen genutzten Smarthost.
cge@sbede 7.1 199
jonasmayer@sbede 25.1 200 {{code language="bash"}}
201 ld_kopano::postfix::hashes:
202   '%{dir_etc}/sender_dependent_relayhost_maps_external.hash':
203     content: |
204       %{header}
205       <> smtp.meineschule.de
206       @meineschule.de smtp.meineschule.de
cge@sbede 23.1 207 {{/code}}
208
209
jonasmayer@sbede 29.1 210 (% style="color:#000000" %)Darüber hinaus ist es in diesem Zuge empfehlenswert, im Vorhinein die Annahme von E-Mails durch den Kopano-Dienst **kopano-spooler **zu verweigern, die von fremden (also nicht intern genutzten) **__Absender__domänen** stammen.
211 Dazu muss folgender Parameter abweichend zur Standardeinstellung in derselben Konfigurationsdatei {{box}}kopano-g1.yaml{{/box}} gesetzt werden:
jonasmayer@sbede 28.1 212
213 {{code language="yaml"}}
jonasmayer@sbede 30.1 214 # Disable mail redirects from foreign domains (sender address) in Kopano
jonasmayer@sbede 28.1 215 ld_kopano::spooler:
216 settings:
217 allow_redirect_spoofing: 'no'
218 {{/code}}
219
jonasmayer@sbede 31.1 220 (% style="color:#000000" %)Insbesondere  beim Versand von E-Mails **per Smarthost** können dadurch Mails in der Postfix-Nachrichtenwarteschlange vermieden werden, die für den Versand unzulässig sind, weil weder die Absender- noch die Empfängeradresse zur eigenen Maildomain passen.
jonasmayer@sbede 28.1 221
jonasmayer@sbede 31.1 222 (% class="box infomessage" %)
223 (((
jonasmayer@sbede 32.1 224 (% style="font-size:12px" %)**Hinweis:** Weiterführende Informationen zur Einstellung können unter [[diesem Link>>http://manpages.ubuntu.com/manpages/impish/man5/kopano-spooler.cfg.5.html||rel="noopener noreferrer" target="_blank"]] nachgelesen werden.
jonasmayer@sbede 31.1 225 )))
jonasmayer@sbede 28.1 226
jonasmayer@sbede 31.1 227
jonasmayer@sbede 25.1 228 ===== (% style="color:#000000" %)__**2.2 Regelmäßige Synchronisation der Benutzer in das globale Adressbuch**__(%%) =====
cge@sbede 23.1 229
jonasmayer@sbede 25.1 230 (% style="color:#000000" %)Durch einen Cronjob ist es möglich Benutzer in das Globale Adressbuch einzupflegen. Hierbei handelt es sich um eine Erweiterung für die Kopano Outlook Extension, damit Benutzer mit Kopano-Postfach automatisch im Adressbuch anwählbar sind.
cge@sbede 7.1 231
232 {{code language="bash"}}
jonasmayer@sbede 25.1 233 root@kopano-g1:~ # chmod +x /etc/cron.daily/gabsync
cge@sbede 7.1 234 {{/code}}
235
jonasmayer@sbede 25.1 236 (% style="color:#000000" %)__**Hinweis:**__ Dies stellt eine Erweiterung zum regulären ActiveSync-Protokoll durch Z-Push dar. Die Funktionsweise basiert auf einem synchronisierten Kontaktordner namens „Z-Push-KOE-GAB“ als Unterordner im Public Store / Öffentlichen Ordner.
cge@sbede 7.1 237
cge@sbede 16.1 238
jonasmayer@sbede 25.1 239 ===== (% style="color:#000000" %)**__2.3 Anbindung/Akkulaufzeit von Endgeräten verbessern durch Konfiguration von HTTP KeepAlive__**(%%) =====
jonasmayer@sbede 18.1 240
jonasmayer@sbede 25.1 241 (% style="color:#000000" %)Bei Verwendung des ActiveSync-Protokolls bzw. Kopano Z-Push zur Anbindung von Endgeräten (Smartphones, Tablets, MS Outlook 2013/2016/2019 Clients) empfiehlt es sich, auf die HTTP-KeepAlive Einstellungen für die Webserver-Dienste in der Verbindungskette (Rev-Proxy → Kopano-Server) Einfluss zu nehmen.
jonasmayer@sbede 18.1 242
jonasmayer@sbede 25.1 243 (% style="color:#000000" %)Der KeepAlive-Wert wird bewusst hoch gewählt, damit Verbindungen zwischen Client und Kopano-Server länger offen gehalten werden können. Dadurch schont man die Batterie und Laufzeit von mobilen Geräten, da es sich u.a. auf den Standby-Betrieb von Smartphones auswirkt (der nicht permanent unterbrochen wird zum Starten einer neuen Verbindung).
cge@sbede 16.1 244
245
jonasmayer@sbede 25.1 246 (% style="color:#000000" %)Bearbeiten Sie die Datei kopano-g1.yaml im puppeteer Container:
cge@sbede 16.1 247
248 {{code language="bash"}}
249 root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/kopano-g1.yaml
250 {{/code}}
251
jonasmayer@sbede 25.1 252 (% style="color:#000000" %)Erweitern Sie die Datei um die folgenden Einstellungen:
cge@sbede 16.1 253
jonasmayer@sbede 25.1 254 {{code language="yaml"}}
255 nginx::keepalive_timeout: 3600
256 nginx::keepalive_requests: 500
257
258 apache::keepalive: 'On'
259 apache::keepalive_timeout: '45'
260 apache::max_keepalive_requests: '500'
cge@sbede 16.1 261 {{/code}}
262
263
jonasmayer@sbede 25.1 264 (% style="color:#000000" %)Zusätzlich müssen Sie die Datei rev-proxy.yaml erstellen/bearbeiten und dort ebenfalls HTTP KeepAlive Einstellungen setzen:
Jens Gruber 2.2 265
jonasmayer@sbede 25.1 266 {{code language="bash"}}
267 root@puppeteer:~ # vim /etc/logodidact/hiera/custom.d/rev-proxy.yaml
268 {{/code}}
Jens Gruber 3.1 269
jonasmayer@sbede 25.1 270 (% style="color:#000000" %)Ergänzen/Befüllen Sie die Datei mit folgendem Inhalt:
271
Jens Gruber 3.1 272 {{code language="bash"}}
jonasmayer@sbede 25.1 273 nginx::keepalive_timeout: 3600
274 nginx::keepalive_requests: 500
Jens Gruber 3.1 275 {{/code}}