Аспро: ЛайтШоп [тема: ZFS не монтируется при загрузке после обновления]

ZFS не монтируется при загрузке после обновления

Mon, 15 Jan 2018 07:59:00 +0300

ZFS не монтируется при загрузке после обновления Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Я никогда не собирался никуда ставить свои Docker-штучки, просто установил ради теста, а потом удалил — и всё равно было довольно неожиданно.
15.01.2018 07:59:00, kroem.

ZFS не монтируется при загрузке после обновления

Sun, 14 Jan 2018 18:20:00 +0300

ZFS не монтируется при загрузке после обновления Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Это все файловые системы в rpool/ROOT/pve-1.
Код:
zfs set canmount=off rpool/ROOT/pve-1/014579f53cfb31770b23418d4e9f6c62a44052ffa4d08386752d085ff5f58eec
zfs set canmount=off rpool/ROOT/pve-1/0bbb0c12579736d6363a87311f0d092805cd97bb4baedc8ffb5f64e8fb9fe83d
zfs set canmount=off rpool/ROOT/pve-1/14e89baf9818049fef21fa96340b86e554b7be728a0b85ccf7455482e84ff8ad
zfs set canmount=off rpool/ROOT/pve-1/1db950ce97024660669be7d68f89f7325920e51953aa585a77847cd79d7f2dc6
zfs set canmount=off rpool/ROOT/pve-1/353197f9a7babaaccea669440d4c131b381f002c49b923d4934090cbafa8b3bf
zfs set canmount=off rpool/ROOT/pve-1/51fa3a1f6638ad8a12c4718549017ae72391e32b84cb163479b071dbab741946-init
zfs set canmount=off rpool/ROOT/pve-1/5b728d4662831898b05610db35b74cc2040d707f259a7c4abe627ce40749d342
zfs set canmount=off rpool/ROOT/pve-1/5de5062b7f279f9db04437d13e1a2c6eae6714a40e62a3643fa3fb14705082a4
zfs set canmount=off rpool/ROOT/pve-1/5f4232890affdb03f4098f5d7c14728ec51a647dce2f02621aa8ef6bd3ae0d81
zfs set canmount=off rpool/ROOT/pve-1/6698d16215658053848de14679fdeda2ee3053fc0f6ea0b8c6f5c6d43568a993
zfs set canmount=off rpool/ROOT/pve-1/7f14abd3f29b84f5d090055237fa5bea8088798594ec05232f2bf7c8da758b26
zfs set canmount=off rpool/ROOT/pve-1/95977d88d3173716aa400640f4561f0cf596dff00ad4ee1c0aad470fa473815b
zfs set canmount=off rpool/ROOT/pve-1/9e9165fd3413b7cc21b40377b0479df40b9bb1eb96455c2e74a619a0490eab8c
zfs set canmount=off rpool/ROOT/pve-1/a22e53e9dd3051af4e6d03256ce5176f73a0faefca361871fd21a1185bd294c9-init
zfs set canmount=off rpool/ROOT/pve-1/b50b679292ed86575b43310aa1530f48b8bea7aafb64fa2f2f061006b767696d
zfs set canmount=off rpool/ROOT/pve-1/ec4eb1aea4e29a8dd79fe0823649bf04fff1e479543e61815ab987966da81a4e

Это позволит загрузиться без проблем, но подумайте о том, чтобы разместить ваши докеры в отдельной файловой системе, например, rpool/docker.
14.01.2018 18:20:00, Rob Loan.

ZFS не монтируется при загрузке после обновления

Sun, 14 Jan 2018 16:29:00 +0300

ZFS не монтируется при загрузке после обновления Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Случайно не установил ли ты Docker до того, как возникла эта проблема? Я вот установил... и столкнулся с этой проблемой.
14.01.2018 16:29:00, kroem.

ZFS не монтируется при загрузке после обновления

Tue, 02 Jan 2018 02:32:00 +0300

ZFS не монтируется при загрузке после обновления Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Добавлю немного к этому, кажется, что создаётся куча снимков rpool ROOT, и именно они мешают монтированию. Может, каждый выход соответствует одному из них?

Код:
root@fmt-pve-10:~# zfs list -t snapshot
NAME USED AVAIL REFER MOUNTPOINT
rpool/ROOT/pve-1/014579f53cfb31770b23418d4e9f6c62a44052ffa4d08386752d085ff5f58eec@219481237 8K - 439M -
rpool/ROOT/pve-1/0bbb0c12579736d6363a87311f0d092805cd97bb4baedc8ffb5f64e8fb9fe83d@435607413 8K - 439M -
rpool/ROOT/pve-1/14e89baf9818049fef21fa96340b86e554b7be728a0b85ccf7455482e84ff8ad@152400782 8K - 59.3M -
rpool/ROOT/pve-1/1db950ce97024660669be7d68f89f7325920e51953aa585a77847cd79d7f2dc6@324224017 8K - 441M -
rpool/ROOT/pve-1/353197f9a7babaaccea669440d4c131b381f002c49b923d4934090cbafa8b3bf@924237964 8K - 59.3M -
rpool/ROOT/pve-1/51fa3a1f6638ad8a12c4718549017ae72391e32b84cb163479b071dbab741946-init@205453598 0B - 441M -
rpool/ROOT/pve-1/5b728d4662831898b05610db35b74cc2040d707f259a7c4abe627ce40749d342@740478434 8K - 90.2M -
rpool/ROOT/pve-1/5de5062b7f279f9db04437d13e1a2c6eae6714a40e62a3643fa3fb14705082a4@584052378 8K - 59.3M -
rpool/ROOT/pve-1/5f4232890affdb03f4098f5d7c14728ec51a647dce2f02621aa8ef6bd3ae0d81@158039809 8K - 440M -
rpool/ROOT/pve-1/6698d16215658053848de14679fdeda2ee3053fc0f6ea0b8c6f5c6d43568a993@672362295 8K - 64.1M -
rpool/ROOT/pve-1/7f14abd3f29b84f5d090055237fa5bea8088798594ec05232f2bf7c8da758b26@65366072 8K - 439M -
rpool/ROOT/pve-1/95977d88d3173716aa400640f4561f0cf596dff00ad4ee1c0aad470fa473815b@109495860 0B - 441M -
rpool/ROOT/pve-1/95977d88d3173716aa400640f4561f0cf596dff00ad4ee1c0aad470fa473815b@647135761 0B - 441M -
rpool/ROOT/pve-1/9e9165fd3413b7cc21b40377b0479df40b9bb1eb96455c2e74a619a0490eab8c@487929142 8K - 441M -
rpool/ROOT/pve-1/a22e53e9dd3051af4e6d03256ce5176f73a0faefca361871fd21a1185bd294c9-init@749503870 0B - 441M -
rpool/ROOT/pve-1/b50b679292ed86575b43310aa1530f48b8bea7aafb64fa2f2f061006b767696d@421214420 8K - 64.1M -
rpool/ROOT/pve-1/ec4eb1aea4e29a8dd79fe0823649bf04fff1e479543e61815ab987966da81a4e@404108242 8K - 59.3M -

Я удалил столько, сколько мог, но остальные выдают ошибку "dataset is busy" при попытке удаления.
02.01.2018 02:32:00, pjkenned.

ZFS не монтируется при загрузке после обновления

Mon, 01 Jan 2018 23:55:00 +0300

ZFS не монтируется при загрузке после обновления Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Просто заметка: у меня такая же проблема, как и у автора темы. Пробовал оба варианта: proxmox-ve_5.1-722cc488-1.iso и proxmox-ve_5.1-3.iso — у обоих была эта ошибка. Попробовал способ от @st0ne с "spam exit at prompt", и, кажется, реально сработало — меньше чем с 20-й попытки. rpool находится на зеркальном массиве ZFS из 2 дисков Intel DC S3610 480GB, подключённых к контроллеру Intel SATA на чипсете C612. Сервер — Supermicro 2U Ultra с двумя процессорами E5-2698 V4. На этой же системе мне приходится добавлять rootdelay=10.
01.01.2018 23:55:00, pjkenned.

ZFS не монтируется при загрузке после обновления

Mon, 06 Nov 2017 15:17:00 +0300

ZFS не монтируется при загрузке после обновления Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Доступны новые пакеты ZFS и ядра для тестирования, пожалуйста, ознакомьтесь с выпуском Proxmox VE 5.1!
06.11.2017 15:17:00, fabian.

ZFS не монтируется при загрузке после обновления

Sun, 29 Oct 2017 14:25:00 +0300

ZFS не монтируется при загрузке после обновления Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет, у меня такая же проблема. После перезагрузки мой сервер proxmox не стартует, поэтому приходится смотреть на монитор. Та же ошибка, что и выше. После того, как я раза 40 ввёл команду "exit", он наконец загрузился нормально. Это не очень удобно, потому что нельзя каждый раз бегать к серверу, если хочешь перезагрузить его для обновления... Есть идеи, как это решить? Спасибо.
29.10.2017 14:25:00, st0ne.

ZFS не монтируется при загрузке после обновления

Sat, 25 Nov 2017 08:51:00 +0300

ZFS не монтируется при загрузке после обновления Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
Привет, у меня та же проблема, сделал как st0ne, сервер запустился, но теперь выдает следующие ошибки: qm start 100 ipcc_send_rec[1] failed: Connection refused ipcc_send_rec[2] failed: Connection refused ipcc_send_rec[3] failed: Connection refused Невозможно загрузить список контроля доступа: Connection refused pve-manager не запущен, может, кто-то поможет?
25.11.2017 08:51:00, Antonio Blanco.

ZFS не монтируется при загрузке после обновления

Mon, 09 Oct 2017 00:00:00 +0300

ZFS не монтируется при загрузке после обновления Proxmox Виртуальная Среда в форуме Proxmox Виртуальная Среда.
У меня установлен Proxmox 5.0-32 на Dell R710 с одним RAIDZ1 массивом из шести дисков по 2 ТБ. Этот массив используется одновременно для ВМ, контейнеров и самой установки Proxmox. Я понимаю, что такая конфигурация далека от идеала, но она стабильна и достаточно производительна для моих задач — при условии, что я могу перезагружать сервер как обычную машину.

Однако после перезагрузки сразу после команды "apt-get dist-upgrade" какая-то непонятная часть ZFS пула почему-то не монтируется. Это отличается от других похожих проблем, которые я встречал, потому что пул при этом успешно импортируется, а не монтируются только эти странные подкаталоги.

Ниже пример вывода после попадания в BusyBox:
Команда:
mount -o zfsutil -t zfs rpool/ROOT/pve-1/07b3e44b4ec33fc185144a325971911c45547f051a1f95a39314afdab787862f /root//07b3e44b4ec33fc185144a325971911c45547f051a1f95a39314afdab787862f
Сообщение:
filesystem 'rpool/ROOT/pve-1/07b3e44b4ec33fc185144a325971911c45547f051a1f95a39314afdab787862f' не может быть смонтирована в '/root//07b3e44b4ec33fc185144a325971911c45547f051a1f95a39314afdab787862f' из-за ошибки каноникализации 2.
mount: монтирование rpool/ROOT/pve-1/07b3e44b4ec33fc185144a325971911c45547f051a1f95a39314afdab787862f в /root//07b3e44b4ec33fc185144a325971911c45547f051a1f95a39314afdab787862f не удалось: Нет такого файла или каталога
Ошибка: 2

Не удалось примонтировать rpool/ROOT/pve-1/07b3e44b4ec33fc185144a325971911c45547f051a1f95a39314afdab787862f в /root//07b3e44b4ec33fc185144a325971911c45547f051a1f95a39314afdab787862f.
Смонтируйте файловую систему вручную и выйдите.

BusyBox v1.22.1 (Debian 1:1.22.0-19+b3) встроенная оболочка (ash)
Введите 'help' для списка встроенных команд.

/bin/sh: нет доступа к tty: управление задачами отключено
/ #

Если я пытаюсь выполнить эту команду вручную, получаю точно такой же вывод:
filesystem 'rpool/ROOT/pve-1/07b3e44b4ec33fc185144a325971911c45547f051a1f95a39314afdab787862f' не может быть смонтирована в '/root//07b3e44b4ec33fc185144a325971911c45547f051a1f95a39314afdab787862f' из-за ошибки каноникализации 2.
mount: монтирование rpool/ROOT/pve-1/07b3e44b4ec33fc185144a325971911c45547f051a1f95a39314afdab787862f в /root//07b3e44b4ec33fc185144a325971911c45547f051a1f95a39314afdab787862f не удалось: Нет такого файла или каталога

Если выполнить "mkdir /root//<строка_сюда>" перед монтированием, то никаких сообщений не появляется, но монтируется дополнительная и бесполезная файловая система внутри root.

Вывод "zpool status":
/ #
zpool status
pool: rpool
state: ONLINE
scan: none requested
config:

NAME STATE READ WRITE CKSUM
rpool ONLINE 0 0 0
raidz1-0 ONLINE 0 0 0
sda2 ONLINE 0 0 0
sdb2 ONLINE 0 0 0
sdc2 ONLINE 0 0 0
sdd2 ONLINE 0 0 0
sde2 ONLINE 0 0 0
sdf2 ONLINE 0 0 0

errors: No known data errors

Если я даю команду "exit" здесь, появляется то же самое сообщение, но с другой случайной строкой из "zfs list". Если я повторю exit 42 раза подряд, машина (наконец-то) полноценно загружается. Такое поведение сохраняется при последующих перезагрузках, поэтому после каждой перезагрузки приходится вводить exit[enter] ровно 42 раза, чтобы Proxmox наконец загрузился — независимо от того, делал ли я dist-upgrade или нет.

Я нашёл несколько ресурсов, но не могу их здесь выложить по известным причинам. Я пытался применить все рекомендации, но без результата. Я могу менять системные файлы в /root и запускать утилиты типа "update-grub" и "update-initramfs" после выхода из BusyBox, но проблема остаётся.

Команда "zpool import rpool" выдаёт ошибку — пул с таким именем уже существует, что подтверждается выводом "zpool status". Самое простое решение, которое я нашёл, — это заново установить Proxmox и пересоздать ZFS пул. Я уже дважды переустанавливал систему ради решения этой проблемы и сейчас снова застрял в BusyBox — максимально сузил круг поиска. Я новичок в ZFS и Proxmox и явно не до конца разбираюсь.

Есть ли что-то, что можно попробовать дальше? Или нужна дополнительная информация?
09.10.2017 00:00:00, seevee.