Dovecot Clustering & Replication
Clustering yapılabilmesi için en az 2 farklı dovecot instance gerekmektedir. Ayrıca iki farklı Clustering gerçekleştirilebilir bunlar NFS-tabanlı (File System Based) ve SSH-tabanlı.
Dsync : (Dovecot e-posta senkronizasyon)
Dsync : (Dovecot e-posta senkronizasyon)
Neden dovecot senkronizasyon file sistem replikasyonun blok düzeyinde bir parçasıdır ?
Aggregator Process
Replication Mail Plugin'in çalıştığı yerde bir de Aggregator Process görev almaktadır. Yaptığı işlem Replication Mail Plugin'den gelen bildirimleri TCP bağlantısı üzerinden Replicator Process'e iletir. Replicator Process ise Dovecot Proxy Server üzerinde çalışır.Bu basit bir optimizasyon anlamına gelmektedir. Replication Mail Plugin ile Director Server arasında çok fazla sayıda TCP bağlantısı olmasından kurtarmaktadır.
Replicator
Bütün mail kullanıcıları için priority kuyrugu tutar ve herhangi bir değişiklikte sıralamayı günceller. Dsync Hızlı senkronizasyon ve Tam senkronizasyon olmak üzere iki tür senkronizasyon yapabilmektedir.
Doveadm sync
Yukardaki özelliklerden bağımsızdır. Bu da bir mail kullanıcısını replike etmek için kullanılabilir. Tek problem replike edilecek yeri açıkça belirtmek gerekmektedir. mail_replica alanına set edilen kısım replike edilir. Birden fazla mail_replica, mail_replica2 gibi değerler kullanılabilir.
Network File System-based yapılarda mail_replica parametresi mail_location parametresi ile aynıdır.
Non-Network File System-based yapılarda ise Dovecot sunucuları birbileri ile SSH üzerinden haberleşirler.
Dsync uzun süre lock durumuna düşmeden senkronizasyon gerçekleştirebilmektedir. Mail kutusunda senkronizasyon sırasında herhangi bir değişiklik oldugunda, replikeler birbileri ile aynı olmayabilir ancak herhangi birşey kesintiye uğramaz. Dsync bu durumda log tutar ve uyarı verir. Bir başka replikasyon işleminde bu durum düzeltilir.
- Dsync file sistem bozukluk/çakışmalarını replike etmez.
- 2 farklı instance olması herhangi bir veri kaybına neden olmaktan kurtatır. Eğer iki tarafta da değişiklik yaşanırsa data kaybı yaşanmadan merge edilir.
Replication Mail Plugin
Bu plugin basit bir uyarı pluginidir. Mail kutusundaki bütün değişiklikleri dinler yeni mail gelmesi, silinmesi, okunması gibi durumlarda Replication-Notify-Fifo ' ya değişikliğin hangi mail hesabında olduğunu ve önem seviyesini asenkron bir şekilde gönderir. Replication-Notify-Fifo replikasyon için önem arz eden değişikliklerin mail hesabı ve önem seviyesine göre tutulduğu stack'tir. Replicaton Mail Plugin senkron replikasyonda yapabilmektedir ancak IMAP protokolü için gözle görülür bir gecikmeyen sebep oluri LMTP için uygun olabilir.
Aggregator Process
Replication Mail Plugin'in çalıştığı yerde bir de Aggregator Process görev almaktadır. Yaptığı işlem Replication Mail Plugin'den gelen bildirimleri TCP bağlantısı üzerinden Replicator Process'e iletir. Replicator Process ise Dovecot Proxy Server üzerinde çalışır.Bu basit bir optimizasyon anlamına gelmektedir. Replication Mail Plugin ile Director Server arasında çok fazla sayıda TCP bağlantısı olmasından kurtarmaktadır.
Replicator
Bütün mail kullanıcıları için priority kuyrugu tutar ve herhangi bir değişiklikte sıralamayı günceller. Dsync Hızlı senkronizasyon ve Tam senkronizasyon olmak üzere iki tür senkronizasyon yapabilmektedir.
- Hızlı Senkronizasyon : Daha az network trafiği ve daha az iş yükü. Normalde bütün değişiklikleri replike etmek için yeterlidir ancak güvenilir değildir.
- Tam Senkronizasyon : Biraz daha yavaş işlem yapar ancak senkronizasyon tamamlandığını garanti eder.
Bütün kullanıcılar ilk olarak "none" priority ile kuyrukta yer alır. Her bir replikasyon zamanı tutulur (last_*_sync timestamp). Replicator Process istenirse belirli periyotlarla dump oluşturabilir.
Replicator Process kuyruğun en başında yer alan kullanıcı(kullanıcılar) için replikasyon işlemine başladığı anda onların priority seviyesini "none" durumuna alır. Bu durum replikasyon sırasında herhangi bir değişiklik olduğunda değişiklik bildirimi kaybına neden olmadan veri kaybını önlemeyi sağlar. replication_max_conns parametresi ile aynı anda kaç tane replikasyon işlemi yapılacağı ayarlanabilir.
Dovecot instance'larından bir tanesi master görevini üstlenir ve replikasyon bilgilerini durumlarını tutar. Herhangi bir durumda master Dovecot hizmet veremez duruma gelirse yerine diğerlerinden bir tanesi master olarak geçer ve bilgilendirir. Replikasyon süresi artarsa belirlenen mail adresine bilgilendirme maili gönderilir.
Replicator Process kuyruğun en başında yer alan kullanıcı(kullanıcılar) için replikasyon işlemine başladığı anda onların priority seviyesini "none" durumuna alır. Bu durum replikasyon sırasında herhangi bir değişiklik olduğunda değişiklik bildirimi kaybına neden olmadan veri kaybını önlemeyi sağlar. replication_max_conns parametresi ile aynı anda kaç tane replikasyon işlemi yapılacağı ayarlanabilir.
Dovecot instance'larından bir tanesi master görevini üstlenir ve replikasyon bilgilerini durumlarını tutar. Herhangi bir durumda master Dovecot hizmet veremez duruma gelirse yerine diğerlerinden bir tanesi master olarak geçer ve bilgilendirir. Replikasyon süresi artarsa belirlenen mail adresine bilgilendirme maili gönderilir.
Doveadm sync
plugin {
# host1 replicates to host2
mail_replica = remote:vmail@host2.example.com
# host2 replicates to host1
#mail_replica = remote:vmail@host1.example.com
}
Network File System-based yapılarda mail_replica parametresi mail_location parametresi ile aynıdır.
Non-Network File System-based yapılarda ise Dovecot sunucuları birbileri ile SSH üzerinden haberleşirler.
Dsync uzun süre lock durumuna düşmeden senkronizasyon gerçekleştirebilmektedir. Mail kutusunda senkronizasyon sırasında herhangi bir değişiklik oldugunda, replikeler birbileri ile aynı olmayabilir ancak herhangi birşey kesintiye uğramaz. Dsync bu durumda log tutar ve uyarı verir. Bir başka replikasyon işleminde bu durum düzeltilir.
