Участник:IvanZakharyaschev/Репликация почтового ящика: различия между версиями

Материал из ALT Linux Wiki
Нет описания правки
 
(не показано 9 промежуточных версий 1 участника)
Строка 1: Строка 1:
[[en:user:imz/research_on_HOW_TO_backup_an_IMAP_account|user:imz/research_on_HOW_TO_backup_an_IMAP_account]]
[[category:HOWTO]]
__FORCETOC__
Понятно, что сохранение копии "почтового ящика" само по себе не представляет большой ценности: нужно уметь её использовать -- хотя бы читать клиентом, а лучше начать предоставлять сервером клиентам. Такая задача имеет место как при создании резервной копии (которую мы должны уметь начать использовать, если что), так и при миграции со старого ПО на новое ПО сервера почтового ящика.
Понятно, что сохранение копии "почтового ящика" само по себе не представляет большой ценности: нужно уметь её использовать -- хотя бы читать клиентом, а лучше начать предоставлять сервером клиентам. Такая задача имеет место как при создании резервной копии (которую мы должны уметь начать использовать, если что), так и при миграции со старого ПО на новое ПО сервера почтового ящика.


==background==
==background==
Я раньше уже интересовался близкой задачей -- [[en:user:imz/research_on_HOW_TO_backup_an_IMAP_account|user:imz/research_on_HOW_TO_backup_an_IMAP_account]]:
Я раньше уже интересовался близкой задачей -- [[:en:user:imz/research_on_HOW_TO_backup_an_IMAP_account|user:imz/research_on_HOW_TO_backup_an_IMAP_account]]:


* поле для изучения там было более общее и открытое: искался любой инструмент для сохранения IMAP-ящика, возможно, без иного доступа (кроме IMAP) к внутреннему хранилищу сервера почтового ящика;
* поле для изучения там было более общее и открытое: искался любой инструмент для сохранения IMAP-ящика, возможно, без иного доступа (кроме IMAP) к внутреннему хранилищу сервера почтового ящика;
Строка 16: Строка 21:
Было:
Было:


<table class="wikitable" border="1">
<table class="wikitable" style="border-right: 0;">
 
<tr>
<th scope="col">хранилище<br />данных почтового ящика</th>
<th scope="col">ПО<br />сервера почтового ящика</th>
<th scope="col">дополнительные мета-данные<br />про ящик</th>
<th scope="col">протокол<br />обращения клиентов</th>
</tr>
 
<tr>
<td rowspan="3">внутреннее хранилище</td>
<td rowspan="3">старое ПО (MS Exchange)</td>
<td><code>UIDVALIDITY</code> <code>UID</code></td>
<th scope="row">IMAP</th>
<td style="border: 0; background-color: white;">IMAP-клиенты</td>
</tr>
 
<tr>
<td><code>SyncKey</code>, <code>ServerId</code></td>
<th scope="row">EAS (Exchange ActiveSync)</th>
<td style="border: 0; background-color: white;">EAS-клиенты</td>
</tr>
 
<tr>
<td>(не интересовались)</td>
<th scope="row">MS Exchange</th>
<td style="border: 0; background-color: white;">MS-клиенты</td>
</tr>
 
</table>
 
Значения <code>UIDVALIDITY</code> <code>UID</code>
(и <code>SyncKey</code>, <code>ServerId</code>) используются для
определения состояния синхронизации клиентов с сервером. Разное ПО
сервера генерирует их по своим правилам и хранит по-своему. Их смена
приведёт к полной пересинхронизации клиентов (с потерей прошлого кэша)
-- в общем, переезд на реплику не останется незамеченным.
См. также:
 
* [[:en:user:imz/research_on_HOW_TO_backup_an_IMAP_account#Saving UIDs (to seamlessly switch to a backup IMAP server)|Saving UIDs (to seamlessly switch to a backup IMAP server)]]
* [[:en:user:imz/research_on_HOW_TO_backup_an_IMAP_account#Saving keywords, flags|Saving keywords, flags]]
 
Будет:
 
<table class="wikitable" style="border-right: 0;">
 
<tr>
<th scope="col">хранилище<br />данных почтового ящика</th>
<th colspan="2" scope="col">ПО<br />сервера почтового ящика</th>
<th scope="col">дополнительные мета-данные<br />про ящик</th>
<th scope="col">протокол<br />обращения клиентов</th>
</tr>
 
<tr>
<td rowspan="3">Maildir</td>
<td rowspan="2" style="border-right: 0;">dovecot</td>
<td style="border-left: 0;" />
<td><code>UIDVALIDITY</code> <code>UID</code></td>
<th scope="row">IMAP</th>
<td style="border: 0; background-color: white;">IMAP-клиенты</td>
</tr>
 
<tr>
<td>SOGo</td>
<td><code>SyncKey</code>, <code>ServerId</code></td>
<th scope="row">EAS (Exchange ActiveSync)</th>
<td style="border: 0; background-color: white;">EAS-клиенты</td>
</tr>
 
<tr>
<td colspan="2">-</td>
<td>-</td>
<th scope="row">MS Exchange</th>
<td style="border: 0; background-color: white;">MS-клиенты</td>
</tr>
 
</table>
 
==перенос (конкретные инструменты для Exchange→dovecot+SoGo)==
 
Было:
 
<table class="wikitable" style="border-right: 0;">
 
<tr>
<th scope="col">хранилище<br />данных почтового ящика</th>
<th scope="col">ПО<br />сервера почтового ящика</th>
<th scope="col">дополнительные мета-данные<br />про ящик</th>
<th scope="col">протокол<br />обращения клиентов</th>
</tr>
 
<tr>
<td rowspan="3">внутреннее хранилище</td>
<td rowspan="3">старое ПО (MS Exchange)</td>
<td><s><code>UIDVALIDITY</code> <code>UID</code></s></td>
<th scope="row"><s>IMAP</s></th>
<td style="border: 0; background-color: white;"><s>IMAP-клиенты</s></td>
</tr>
 
<tr>
<td><code>SyncKey</code>, <code>ServerId</code></td>
<th scope="row">EAS (Exchange ActiveSync)</th>
<td style="border: 0; background-color: white;">EAS-клиенты</td>
</tr>
 
<tr>
<td>(не интересовались)</td>
<th scope="row">MS Exchange</th>
<td style="border: 0; background-color: white;">MS-клиенты</td>
</tr>
 
</table>
 
Инструменты для вытаскивания соответствующих данных (и мета-данных, если что-то из них будет важно):
 
<table class="wikitable" style="border-right: 0;">
 
<tr>
<th scope="col">хранилище<br />данных почтового ящика</th>
<th scope="col">ПО<br />сервера почтового ящика</th>
<th scope="col">дополнительные мета-данные<br />про ящик</th>
<th scope="col">протокол<br />обращения клиентов</th>
</tr>
 
<tr>
<td rowspan="2">(thx kazanskyap)
<pre>add-pssnapin *Exchange*
 
Get-Mailbox USERNAME
| New-MailboxExportRequest
-FilePath \\SOMEHOST\c$\USERNAME.pst
</pre>
</td>
<td rowspan="2">из Exchange</td>
<td><code>UIDVALIDITY</code> <code>UID</code> (одно на сервер)
можно прочитать любым IMAP-клиентом
</td>
<th scope="row"><s>IMAP</s></th>
</tr>


<tr class="wikitable" border="1">
<tr>
<th scope="col class="wikitable" border="1">хранилище<br />данных почтового ящика</th>
<td><code>SyncKey</code> (своё на каждый клиент), <code>ServerId</code>
<th scope="col" class="wikitable" border="1">ПО<br />сервера почтового ящика</th>
прочитать из логов обращений
<th scope="col" class="wikitable" border="1">дополнительные мета-данные<br />про ящик</th>
специальной командой
<th scope="col" class="wikitable" border="1">протокол<br />обращения клиентов</th>
</td>
<th scope="row">EAS (Exchange ActiveSync)</th>
</tr>
</tr>


<tr class="wikitable" border="1">
</table>
<td rowspan="3" class="wikitable" border="1">внутреннее хранилище</td>
 
<td rowspan="3" class="wikitable" border="1">старое ПО (MS Exchange)</td>
...и импорта этих данных и мета-данных:
<td class="wikitable" border="1"><code>UIDVALIDITY</code> <code>UID</code></td>
 
<th scope="row" class="wikitable" border="1">IMAP</th>
<table class="wikitable" style="border-right: 0;">
 
<tr>
<th scope="col">хранилище<br />данных почтового ящика</th>
<th scope="col">ПО<br />сервера почтового ящика</th>
<th scope="col">дополнительные мета-данные<br />про ящик</th>
<th scope="col">протокол<br />обращения клиентов</th>
</tr>
</tr>


<tr class="wikitable" border="1">
<tr>
<td class="wikitable" border="1"><code>SyncKey</code>, <code>ServerId</code></td>
<td rowspan="2"><code>readpst</code> и потом
<th scope="row" class="wikitable" border="1">Exchange ActiveSync (EAS)</th>
либо <code>dovecot-lda</code>,
либо <code>dsync</code>
</td>
<td rowspan="2">в dovecot+SOGo</td>
<td><code>UIDVALIDITY</code>: как установить?
<code>UID</code>: можно записать (при большом желании)
</td>
<th scope="row">IMAP</th>
</tr>
</tr>


<tr class="wikitable" border="1">
<tr>
<td class="wikitable" border="1">(не интересно)</td>
<td><code>SyncKey</code>, <code>ServerId</code>:
<th scope="row" class="wikitable" border="1">MS Exchange</th>
как установить?
</td>
<th scope="row">EAS (Exchange ActiveSync)</th>
</tr>
</tr>


Строка 45: Строка 204:


Будет:
Будет:
<table class="wikitable" style="border-right: 0;">
<tr>
<th scope="col">хранилище<br />данных почтового ящика</th>
<th colspan="2" scope="col">ПО<br />сервера почтового ящика</th>
<th scope="col">дополнительные мета-данные<br />про ящик</th>
<th scope="col">протокол<br />обращения клиентов</th>
</tr>
<tr>
<td rowspan="3">Maildir</td>
<td rowspan="2" style="border-right: 0;">dovecot</td>
<td style="border-left: 0;" />
<td><code>UIDVALIDITY</code> <code>UID</code></td>
<th scope="row">IMAP</th>
<td style="border: 0; background-color: white;">IMAP-клиенты</td>
</tr>
<tr>
<td>SOGo</td>
<td><code>SyncKey</code>, <code>ServerId</code></td>
<th scope="row">EAS (Exchange ActiveSync)</th>
<td style="border: 0; background-color: white;">EAS-клиенты</td>
</tr>
<tr>
<td colspan="2" style="background-color: white;">-</td>
<td style="background-color: white;"><s>(не интересовались)</s></td>
<th scope="row"><s>MS Exchange</s></th>
<td style="border: 0; background-color: white;"><s>MS-клиенты</s></td>
</tr>
</table>
На самом деле с переносом мета-данных (нужных для синхронизации) всё совсем неясно и для простоты можно было бы не заморачиваться с ними (а при большом желании реализовать возможность их переноса).
{{Category navigation|title=HOWTO|category=HOWTO|sortkey={{SUBPAGENAME}}}}

Текущая версия от 12:43, 10 марта 2018



Понятно, что сохранение копии "почтового ящика" само по себе не представляет большой ценности: нужно уметь её использовать -- хотя бы читать клиентом, а лучше начать предоставлять сервером клиентам. Такая задача имеет место как при создании резервной копии (которую мы должны уметь начать использовать, если что), так и при миграции со старого ПО на новое ПО сервера почтового ящика.

background

Я раньше уже интересовался близкой задачей -- user:imz/research_on_HOW_TO_backup_an_IMAP_account:

  • поле для изучения там было более общее и открытое: искался любой инструмент для сохранения IMAP-ящика, возможно, без иного доступа (кроме IMAP) к внутреннему хранилищу сервера почтового ящика;
  • но задача, касающаяся возобновления работы клиентов с сохранённой резервной копией (со своим иным IMAP-сервером), ставилась только для IMAP-клиентов.

Сейчас в этих заметках нас интересуют более конкретные вещи.

  • Мы как бы обладаем полным доступом к хранилищу текущего сервера (правда, засекреченного -- с одной стороны; с другой стороны -- с возможно несовершенным IMAP).
  • Протоколы общения с клиентами -- не только один IMAP.
  • Какое ПО будет использоваться, чтобы запустить новый наш сервер почтового ящика, тоже более-менее определено.

схема (что в принципе важно)

Было:

хранилище
данных почтового ящика		 ПО
сервера почтового ящика		 дополнительные мета-данные
про ящик		 протокол
обращения клиентов
внутреннее хранилище старое ПО (MS Exchange) UIDVALIDITY UID IMAP IMAP-клиенты
SyncKey, ServerId EAS (Exchange ActiveSync) EAS-клиенты
(не интересовались) MS Exchange MS-клиенты

Значения UIDVALIDITY UID (и SyncKey, ServerId) используются для определения состояния синхронизации клиентов с сервером. Разное ПО сервера генерирует их по своим правилам и хранит по-своему. Их смена приведёт к полной пересинхронизации клиентов (с потерей прошлого кэша) -- в общем, переезд на реплику не останется незамеченным. См. также:

Будет:

хранилище
данных почтового ящика		 ПО
сервера почтового ящика		 дополнительные мета-данные
про ящик		 протокол
обращения клиентов
Maildir dovecot UIDVALIDITY UID IMAP IMAP-клиенты
SOGo SyncKey, ServerId EAS (Exchange ActiveSync) EAS-клиенты
- - MS Exchange MS-клиенты

перенос (конкретные инструменты для Exchange→dovecot+SoGo)

Было:

хранилище
данных почтового ящика		 ПО
сервера почтового ящика		 дополнительные мета-данные
про ящик		 протокол
обращения клиентов
внутреннее хранилище старое ПО (MS Exchange) UIDVALIDITY UID IMAP IMAP-клиенты
SyncKey, ServerId EAS (Exchange ActiveSync) EAS-клиенты
(не интересовались) MS Exchange MS-клиенты

Инструменты для вытаскивания соответствующих данных (и мета-данных, если что-то из них будет важно):

хранилище
данных почтового ящика		 ПО
сервера почтового ящика		 дополнительные мета-данные
про ящик		 протокол
обращения клиентов
(thx kazanskyap) 
add-pssnapin *Exchange*

Get-Mailbox USERNAME
| New-MailboxExportRequest
-FilePath \\SOMEHOST\c$\USERNAME.pst
из Exchange UIDVALIDITY UID (одно на сервер)

можно прочитать любым IMAP-клиентом

IMAP
SyncKey (своё на каждый клиент), ServerId

прочитать из логов обращений специальной командой

EAS (Exchange ActiveSync)

...и импорта этих данных и мета-данных:

хранилище
данных почтового ящика		 ПО
сервера почтового ящика		 дополнительные мета-данные
про ящик		 протокол
обращения клиентов
readpst и потом

либо dovecot-lda, либо dsync

в dovecot+SOGo UIDVALIDITY: как установить?

UID: можно записать (при большом желании)

IMAP
SyncKey, ServerId:

как установить?

EAS (Exchange ActiveSync)

Будет:

хранилище
данных почтового ящика		 ПО
сервера почтового ящика		 дополнительные мета-данные
про ящик		 протокол
обращения клиентов
Maildir dovecot UIDVALIDITY UID IMAP IMAP-клиенты
SOGo SyncKey, ServerId EAS (Exchange ActiveSync) EAS-клиенты
- (не интересовались) MS Exchange MS-клиенты

На самом деле с переносом мета-данных (нужных для синхронизации) всё совсем неясно и для простоты можно было бы не заморачиваться с ними (а при большом желании реализовать возможность их переноса).

HOWTO
32й-OpenGL на 64x • 389-ds • ActiveDirectory/DC • ActiveDirectory/FileShare • ActiveDirectory/Squid • Adobe Flash • AHCI • Участник:Alehander/Монтирование каталогов • Android-devel • Apache Kafka • Appimage • Arepo In Hasher • Asciidoc • Autoinstall • BugTracking/BugzillaMiniHowto • CDEmu и все-все-все • Chroot • Clamav • PostgreSQL/Cluster • Cpufreq • CreateMdRAID1onLiveSystem • CUDA • Cлайд-шоу фоновых рисунков рабочего стола • D Programming Language • DB2 • Dconf • Discord • Tools/Distribute • DPMS • DualBoot в картинках • DualBoot в картинках new • X11/DualSeat • Dynflow • Ed • EDID • ElasticSearch • EnterpriseWine • Epic games • Etckeeper • EterTips • Fail2ban • Fdisk • FFmpeg • Fleet Commander • Folding@Home • FreeIPA • FreePascal HOWTO • FreeRADIUS • FreeRADIUS и корпоративный WiFi • Giter • GoogleTalkPlugin • Hasher/parallel • Hitachi StarBoard • Incoming/HOWTO • I2p • IconsPackaging • IPTV • ITalc • Участник:IvanZakharyaschev/Что делать, если забыл имена пользователей • Участник:IvanZakharyaschev/Что делать, если забыл пароли (в т.ч. пароль root-а) • Участник:IvanZakharyaschev/Что делать, если затёр загрузчик системы • JaCarta • JaCarta/PKI • Java-applet • Java/OracleSDK/Install • JavaPlugin • JeOS VM noDHCP • KVM/Helper • LAME • ActiveDirectory/Login • PVE/LXC • Mailman and lighttpd • DotFiles/Shells/MC • Участник:MichaelShigorin/ПодсуньТарбол • Microsoft Access • MIDI • MsgToEml • MultiSeat systemd • Multistation • NetInstall • NetworkDevicesName • Nextcloud • NTFS • NTFS readonly • Numlock • OpenMeetings • Otrs • OwnCloud9 • Pam mount • Pcsxr • PepperFlash в Chromium • Perfect Desktop • Pidgin • Pipelight • Pipx • Dovecot/Plugins • PostgreSQL • Prelink • PstToMbox • Puppet • Puppetserver • PyVFS • Rdesktop keymap fix • Recoll • Replace disk online • Rescue manuals • Rescue/Launcher • Rescue/Recovery • Ricoh SP 100 • Roundcube • Ruby Packaging mini-HOWTO • Rujel • Rujel HOWTO • RunaWFE • SambaADClient и клонирование диска • SAP GUI for Java • SCOM • Shared Library Symbol Versioning HOWTO • SharedFolderHowTo • Smart Proxy • Smart proxy dynflow-core • Socket race conditions • SOGo • OpenOffice.org/SSL-сертификат • SSSD/AD • Swap • Synaptic • Task • Telegram • Telegram Desktop • Thunderbird • Tips • TLP • Unity • LTSP/UpstreamMigration • USBIP • Veyon • Viber • Video streaming vlc • VipNet Client • ViPNet Coordinator/СПТ7 • VirtualBox • Vk play • VNC • VPN c динамической маршрутизацией (GRE Racoon OSPF) • Waydroid • WebDav • Wi-fi • Wicd • WINE • Xbox геймпад • XCAT • Xfce/Ограничения • Автологин с блокировкой сеанса • Автоматический вход • Браузер во весь экран • Виртуальная клавиатура в ALT Workstation • Виртуальная флешка • Включение TRIM на (внешнем) SSD • Воссоздание пользователя на отдельном home-разделе • Восстановление • Где и как искать программы • ГОСТ в Caja • ГОСТ в OpenSSL • Гостевой сеанс • Двухфакторная аутентификация Google Authenticator • Диагностика оборудования и системы • ЕАВИИАС • ЕСПД • Загрузочная USB Flash • Загрузочные флешки • Запуск typo3 • Заставка - слайд-шоу • Звук входа в систему • Зеркала • Инструкция по разворачиванию girar-builder • Как Ваш компьютер может дать доступ к себе через туннель средствами ssh, autossh, autosshd • Участник:IvanZakharyaschev/Как дать мне доступ по ssh на Ваш (мобильный) компьютер • Как запускать программы • Как найти пакет по программе • Как настроить почту в Thunderbird • Каталог с доступом для всех локальных пользователей • Киоск • Конcоль GRUB • КонсультантПлюс • Монтирование образов устройств • Настройка Alt Linux для Raspberry Pi с помощью QEMU • Настройка Fstab • Настройка принтера • Неверный размер шрифтов • О Сообществе ALT Linux • Обновление • Обход сбоя загрузки с USB • Особые действия Thunar • Очистка диска • Партионная почта • Перенос программ (backports) • Подключение Android • Пользовательские каталоги • Проверка диска на ошибки • Распознавание лица (howdy) • Режимы работы фреймбуфера • Участник:IvanZakharyaschev/Репликация почтового ящика • Сага о драйверах • Сборка пакетов • Связка Puppet и Foreman • Связка ключей • Секционирование (партицирование) БД Zabbix на СУБД PostgreSQL • Синхронизация файлов • Сканер отпечатков пальцев (fprintd) • Скачивание видео с Яндекс.Дзен • Скачивание сайта • Создание образов устройств • Создание самоподписанных сертификатов • Создание сервиса systemd • Специальные возможности • Oracle/СПТ • Теневое копирование+Точка восстановления • Точка на цифровой клавиатуре • Управление пользователями • Управление правами • Установка Cisco Packet Tracer 7.3.1 на ALT KWorkstation P9 • Установка и настройка Rujel • Установка корневого сертификата • Установка шрифтов • Что делать, если программа не работает • Что такое дистрибутив • Шаблоны документов • Шейпер для больших сетей • ЭП • Ярлычки программ • Категория:32x-video-on64x • Категория:Backup • Категория:BootFlash • Категория:Fdisk • Категория:FreePascal • Категория:Rescue manuals • Категория:Upgrade • Категория:WINE