Информация
Услуги
  • Внедрение
  • Настройка
  • Поддержка
  • Ремонт
Контакты
Оплата
Новости
Доставка
Загрузки
Форум
Настройка
    info@proxmox.su
    +7 (495) 320-70-49
    Заказать звонок
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Войти
    0 Сравнение
    0 Избранное
    0 Корзина
    Аспро: ЛайтШоп
    Телефоны
    +7 (495) 320-70-49
    Заказать звонок
    0
    0
    0
    Аспро: ЛайтШоп
    • +7 (495) 320-70-49
      • Назад
      • Телефоны
      • +7 (495) 320-70-49
      • Заказать звонок
    • info@proxmox.su
    • Москва, Бакунинская улица, 69с1
    • Пн-Пт: 09-00 до 18-00
      Сб-Вс: выходной
    • 0 Сравнение
    • 0 Избранное
    • 0 Корзина
    Главная
    Форум
    Proxmox Mail Gateway
    Ошибка кластера Rsync

    Форумы: Proxmox Виртуальная Среда, Proxmox Backup Server, Proxmox Mail Gateway, Proxmox Datacenter Manager
    Поиск  Пользователи  Правила  Войти
    Страницы: 1
    RSS
    Ошибка кластера Rsync, Proxmox Mail Gateway
     
    Janko
    Guest
    #1
    0
    03.02.2018 08:23:00
    Всем привет, у меня возникли проблемы с настройкой нового кластера...  

    Спойлер:  
    Syslog код:  
    Feb 03 08:18:06 mailgate01.example.com pmgmirror[897]: запускается синхронизация кластера
    Feb 03 08:18:06 mailgate01.example.com pmgmirror[897]: синхронизация базы данных 'mailgate02' не удалась - DBI connect('dbname=Proxmox_ruledb;host=/var/run/pmgtunnel;port=2;','root',...) не выполнена: не удалось подключиться к серверу: Нет такого файла или каталога
    Сервер работает локально и принимает подключения через Unix-сокет "/var/run/pmgtunnel/.s.PGSQL.2"? - /usr/share/perl5/PMG/DBTools.pm строка 59.  
    Feb 03 08:18:06 mailgate01.example.com pmgmirror[897]: синхронизация кластера завершена (1 ошибка, 0.01 секунды (файлы 0.00, база данных 0.01, конфигурация 0.00))
    Feb 03 08:18:21 mailgate01.example.com pmgtunnel[850]: перезапуск аварийно завершённого туннеля 1452 88.99.32.213
    Feb 03 08:18:21 mailgate01.example.com pmgtunnel[850]: туннель завершён 1452 88.99.32.213

    Кто-нибудь может дать совет — можно и на немецком.
     
     
     
    DerDanilo
    Guest
    #2
    0
    19.02.2018 17:22:00
    Можно ли использовать кластер с нестандартными SSH-портами? @proxmox Team В принципе, 'pmgcm' мог бы просто читать настроенный SSH-порт из файла '/etc/services' и использовать порт, указанный там. Но запускать SSH на стандартном порту при публичном доступе к серверу, который работает как виртуальная машина на разных узлах PVE в разных дата-центрах, не рекомендуется.

    П.С. Как долго система должна показывать статус «синхронизация»? Судя по 'iftop', трафика практически нет.
     
     
     
    tom
    Guest
    #3
    0
    19.02.2018 19:49:00
    Смена порта не повысит вашу безопасность. Вместо этого лучше защитить свои сервисы с помощью фаервола. Несколько минут на первоначальную настройку — и всё. Просто периодически проверяйте логи через GUI на предмет ошибок (pmgmirror, pmgtunnel).
     
     
     
    DerDanilo
    Guest
    #4
    0
    19.02.2018 20:19:00
    Это правда, но таким образом немного снижается нагрузка на сервер от «скрипт-кидди». На главном узле 'pmgtunnel' и 'pmgmirror', судя по выводу, вроде всё в порядке:

    Код:
    Feb 19 17:28:01 pmg1 pmgtunnel[889]: starting server
    Feb 19 17:28:01 pmg1 pmgtunnel[889]: starting tunnel 890 <ip of pmg2>
    Feb 19 19:21:15 pmg1 pmgtunnel[889]: tunnel finished 890 <ip of pmg2>
    Feb 19 19:21:42 pmg1 pmgtunnel[861]: starting server
    Feb 19 19:21:42 pmg1 pmgtunnel[861]: starting tunnel 862 <ip of pmg2>

    Код:
    Feb 19 20:11:46 pmg1 pmgmirror[919]: starting cluster syncronization
    Feb 19 20:11:46 pmg1 pmgmirror[919]: cluster syncronization finished (0 errors, 0.21 seconds (files 0.13, database 0.08, config 0.00))

    На pmg2 же я вижу некоторые ошибки rsync.

    Код:
    Feb 19 20:15:41 pmg2 pmgmirror[819]: starting cluster syncronization
    Feb 19 20:15:41 pmg2 pmgmirror[819]: database sync 'pmg1' failed - command 'rsync '--rsh=ssh -l root -o BatchMode=yes -o HostKeyAlias=pmg1' -q --timeout 10 <ip of pmg1>:/var/spool/pmg /var/spool/pmg --files-from /tmp/quarantinefilelist.819' failed: exit code 23
    Feb 19 20:15:41 pmg2 pmgmirror[819]: cluster syncronization finished (1 errors, 0.52 seconds (files 0.00, database 0.38, config 0.14))

    Файл  
    Код:
    /tmp/quarantinefilelist.819  
    похоже, не существует. Хотя, с другой стороны, он в /tmp/. Когда я что-то меняю и на мастер-узле, и на подчинённом, изменения сразу видны на обоих. Временно отключил фаервол, но ничего не изменилось. Что-то упустил? Спасибо за помощь!
     
     
     
    tom
    Guest
    #5
    0
    19.02.2018 20:23:00
    Похоже, вы забыли установить последние обновления. Обновитесь до самой свежей версии и попробуйте снова, также напишите, какая у вас версия. > pmgversion -v
     
     
     
    DerDanilo
    Guest
    #6
    0
    19.02.2018 20:27:00
    Обе системы обновлены с репозитория 'no-subscription'. Также сегодня сделал перезагрузки, чтобы точно применился последний ядро. Версия pmg на обоих хостах совпадает.  

    Код:  
    root@pmg1:~# pmgversion -v  
    proxmox-mailgateway: 5.0-7 (API: 5.0-61/71d9a758, запущенное ядро: 4.13.13-5-pve)  
    pmg-api: 5.0-61  
    pmg-gui: 1.0-31  
    proxmox-spamassassin: 3.4.1-54  
    proxmox-widget-toolkit: 1.0-10  
    pve-kernel-4.13.13-5-pve: 4.13.13-38  
    libpve-http-server-perl: 2.0-8  
    lvm2: 2.02.168-2  
    pve-firmware: 2.0-3  
    libpve-common-perl: 5.0-27  
    pmg-docs: 5.0-13  
    pve-xtermjs: 1.0-2  
    libarchive-perl: 3.2.1-1  
    libxdgmime-perl: 0.01-3  
    zfsutils-linux: 0.7.3-pve1~bpo9  
    libpve-apiclient-perl: 2.0-2  

    Код:  
    root@pmg2:/var/log# pmgversion -v  
    proxmox-mailgateway: 5.0-7 (API: 5.0-61/71d9a758, запущенное ядро: 4.13.13-5-pve)  
    pmg-api: 5.0-61  
    pmg-gui: 1.0-31  
    proxmox-spamassassin: 3.4.1-54  
    proxmox-widget-toolkit: 1.0-10  
    pve-kernel-4.13.13-5-pve: 4.13.13-38  
    libpve-http-server-perl: 2.0-8  
    lvm2: 2.02.168-2  
    pve-firmware: 2.0-3  
    libpve-common-perl: 5.0-27  
    pmg-docs: 5.0-13  
    pve-xtermjs: 1.0-2  
    libarchive-perl: 3.2.1-1  
    libxdgmime-perl: 0.01-3  
    zfsutils-linux: 0.7.3-pve1~bpo9  
    libpve-apiclient-perl: 2.0-2  

    П.С. Может, он выдаёт ошибку с базой данных, так как её пока вообще нет? Пока всё вроде работает нормально. Просто статус особо не меняется. Я только что переключил некритичные домены на настройку PMG и завтра посмотрю, как там дела.
     
     
     
    DerDanilo
    Guest
    #7
    0
    20.02.2018 08:36:00
    @tom База данных по карантину и отслеживанию, похоже, повреждена, так как она постоянно показывает «нет данных в базе», хотя там точно есть информация (спам-отчёты). Как можно её сбросить, чтобы кластер инициализировал её заново? Спасибо.
     
     
     
    tom
    Guest
    #8
    0
    20.02.2018 10:18:00
    Судя по твоим другим темам, предполагаю, что одна из твоих кастомных правок что-то ломает? Ты можешь удалить узлы кластера с помощью команды: > pmgcm delete <cdid>
     
     
     
    DerDanilo
    Guest
    #9
    0
    20.02.2018 10:55:00
    Когда у меня были проблемы с присоединением к кластеру, я вручную удалял cluster.conf и заново создавал кластер. Наверняка это что-то сломало. Если я собираюсь полностью "сбросить" весь кластер вместе со всеми узлами, какой будет самый чистый способ сделать это без переустановки узлов? Я могу создать и скачать резервную копию конфигурации перед этим, так что с изменениями в конфиге у меня проблем не будет. Спасибо!  
    ДОПОЛНЕНИЕ: я не нашёл в документации ничего про сброс кластеров PMG. Для PVE где-то была документация про сброс кластера. Было бы здорово, если бы можно было пересоздать самоподписанные сертификаты так же, как с помощью команды: pvecm updatecerts --force.
     
     
     
    DerDanilo
    Guest
    #10
    0
    20.02.2018 17:26:00
    Я только что переустановил весь кластер и сообщу, если после этого всё ещё будет работать. По крайней мере, мастер-нода снова показывает «нет данных в базе» после импорта бэкапа. Собрал все команды в bash-скрипт «initsetup.sh». Уберу из него личную информацию и выложу на github, чтобы другие могли при необходимости использовать. Также создам heat-шаблон для mailgateway, так как его можно просто установить на работающие системы Debian. Запуск тогда станет ещё быстрее в любом облаке, которое поддерживает heat.

    При присоединении pmg2 теперь выводит следующее:

    Code:
    root@pmg2:~# pmgcm join <ip мастера> --fingerprint <отпечаток сертификата мастера>
    3:29
    Введите пароль: ************
    остановить все сервисы, которые обращаются к базе
    сохранить новую конфигурацию кластера
    узел кластера успешно присоединён
    обновлён /etc/pmg/pmg-authkey.key
    обновлён /etc/pmg/pmg-authkey.pub
    обновлён /etc/pmg/pmg-csrf.key
    обновлён /etc/pmg/domains
    обновлён /etc/pmg/pmg.conf
    копируется база мастера с '<ip мастера>'
    копирование базы мастера завершено (получено 34453 байт)
    удалить локальную базу
    не удалось сменить каталог на "/root": доступ запрещён
    создать новую локальную базу
    не удалось сменить каталог на "/root": доступ запрещён
    вставить полученные данные в локальную базу
    создание индексов
    запустить analyze для ускорения запросов к базе
    не удалось сменить каталог на "/root": доступ запрещён
    ANALYZE
    синхронизация данных карантина
    синхронизация данных карантина завершена

    Нормальны ли эти ошибки с правами root? Я в системе под root, sudo нет. Сообщение об ошибке для pmgmirror:

    Code:
    Feb 20 17:39:16 pmg1 pmgmirror[923]: starting cluster syncronization
    Feb 20 17:39:22 pmg1 pmgmirror[923]: database sync 'pmg2' failed - DBD::Pg::st execute failed: ERROR: duplicate key value violates unique constraint "cstatistic_pkey"
    DETAIL: Key (cid, rid)=(2, 1) already exists. at /usr/share/perl5/PMG/DBTools.pm line 1032.
    Feb 20 17:39:22 pmg1 pmgmirror[923]: cluster syncronization finished (1 errors, 6.11 seconds (files 6.03, database 0.08, config 0.00))

    Можно ли вручную сбросить базу? Кажется, синхронизация статистики теперь работает нормально.
     
     
     
    DerDanilo
    Guest
    #11
    0
    21.02.2018 08:46:00
    После отката к снимкам перед кластером я восстановил конфигурацию без статистики, затем создал кластер и присоединил ноду. Теперь, кажется, всё работает нормально. Но не понимаю, почему мои самоподписанные сертификаты не принимались командой join в Proxmox. Работало только с «оригинальным» pmg-api.pem. @tom, есть идеи, почему так? Как именно должны генерироваться приватные сертификаты, чтобы их поддерживал mailgateway?
     
     
     
    hts
    Guest
    #12
    0
    17.03.2018 07:52:00
    Вы не можете использовать Let's Encrypt?
     
     
     
    DerDanilo
    Guest
    #13
    0
    21.03.2018 17:55:00
    Да, это возможно, но для API каждый раз при обновлении сертификата придётся менять отпечаток. Это слишком сложно и особо не повышает безопасность. По моему мнению, достаточно просто использовать отпечатки. Поэтому я использую haproxy, чтобы предоставлять веб-интерфейс с сертификатом LE через альтернативный порт. Сертификат LE отлично работает для TLS-шифрования с postfix.
     
     
     
    Страницы: 1
    Читают тему
    +7 (495) 320-70-49
    info@proxmox.su

    Конфиденциальность Оферта
    © 2026 Proxmox.su
    Главная Каталог 0 Корзина 0 Избранные Кабинет 0 Сравнение Акции Контакты Услуги Бренды Отзывы Компания Лицензии Документы Реквизиты Поиск Блог Обзоры