Ir al contenido

Администрирование и устранение неполадок в Proxmox VE

Расширенное руководство по администрированию Proxmox VE, кворум кластера, Ceph и гибридное развертывание Universal Print в лабораторных средах Windows Server.

0просмотры

1. Ceph в Proxmox: Гиперконвергенция и высокая доступность

Sección titulada «1. Ceph en Proxmox: Hiperconvergencia y Alta Disponibilidad»

Ceph - это программно-определяемый движок хранения (SDS), интегрированный в Proxmox VE. Он позволяет объединить физические диски (SSD/NVMe) нескольких серверов для консолидации единого логического пула распределенного, общего и избыточного хранения.

Основные преимущества

Sección titulada «Beneficios Principales»
  1. Распределенное Хранение: Группирует локальные жесткие диски, устраняя необходимость приобретения внешних проприетарных шкафов SAN/NAS.
  2. Высокая Доступность (HA): Если физический узел выходит из строя, данные остаются доступными прозрачным образом на оставшихся узлах, что позволяет менеджеру HA немедленно перезапустить пострадавшие виртуальные машины (VMs).
  3. Живая Миграция (Live Migration): Позволяет перемещать виртуальные машины, находящиеся в работе, между физическими узлами без выключения или перерывов в обслуживании, поскольку хранение смонтировано в кластере.
  4. Самовосстановление (Self-Healing): При замене неисправного диска Ceph самостоятельно начинает восстановление и индексацию для восстановления логической избыточности пула.

Требования к архитектуре лаборатории

Sección titulada «Requisitos de Arquitectura en Laboratorio»

Чтобы обеспечить стабильный кворум данных в производстве:

  • Минимум 3 Узла: Необходимое требование для избежания сценариев конфликта типа разделенный мозг (split-brain).
  • Сеть выделенного хранилища: Физическая связь 10 Гбит/с исключительно для трафика репликации Ceph. Сети со скоростью 1 Гбит/с будут вызывать высокие задержки и узкие места.
  • Твердотельные накопители (SSD/NVMe): Необходимы для обеспечения необходимых операций ввода/вывода в динамических виртуализированных средах.

2. Изменение имени хоста в Proxmox VE

Sección titulada «2. Cambio de Hostname en Proxmox VE»

Критическое техническое предупреждение

Sección titulada «Advertencia Técnica Crítica»

Proxmox VE использует имя хоста терминала (hostname) для структурирования физических путей в своей файловой системе в кластере только для чтения (/etc/pve/nodes/NOMBRE_NODO). Смена этого значения напрямую в горячем режиме нарушит подключение и логический монтаж.

Процедура изменения на автономных узлах (CLI)

Sección titulada «Procedimiento de Cambio en Nodos Standalone (CLI)»

Шаг 1: Настройка файлов операционной системы

Sección titulada «Paso 1: Configurar los Archivos del Sistema Operativo»

Из локальной консоли SSH на сервере:

  1. Змініть ім'я хоста системи:
    Ventana de terminal
    nano /etc/hostname
    # Modifica 'nombre-antiguo' por 'PT-PORTEL-ADMIN-NODE01'
  2. Змініть локальне розв'язання імен у базі хостів:
    Ventana de terminal
    nano /etc/hosts
    # Asegura la IP correspondiente:
    # 192.168.10.50 PT-PORTEL-ADMIN-NODE01.local PT-PORTEL-ADMIN-NODE01

Шаг 2: Миграция виртуальных конфигураций

Sección titulada «Paso 2: Migración de las Configuraciones Virtuales»

После перезагрузки Proxmox создаст пустую структуру директорий на основе нового имени хоста. Старые конфигурации виртуальных машин и LXC необходимо вручную скопировать в новое логическое местоположение:

  1. Перезавантажте фізичний вузол:
    Ventana de terminal
    reboot
  2. Знову увійдіть через SSH та виконайте міграцію файлів .conf:
    Ventana de terminal
    cp /etc/pve/nodes/NOMBRE_ANTIGUO/qemu-server/* /etc/pve/nodes/PT-PORTEL-ADMIN-NODE01/qemu-server/
    cp /etc/pve/nodes/NOMBRE_ANTIGUO/lxc/* /etc/pve/nodes/PT-PORTEL-ADMIN-NODE01/lxc/

Шаг 3: Очистка и уборка

Sección titulada «Paso 3: Saneamiento y Limpieza»

После проверки через веб-GUI, что логические ресурсы и виртуальные машины доступны под новым узлом, удалите устаревшие остатки в горячем режиме:

Ventana de terminal
rm -rf /etc/pve/nodes/NOMBRE_ANTIGUO

3. Разделение узлов и демонтаж кластера

Sección titulada «3. Separación de Nodos y Desmantelamiento de Clúster»

Чтобы отключить узел от коммуникационного кластера (Corosync) и восстановить его автономное состояние без форматирования физического хоста:

Шаг 1: Остановка демонов коллективной связи

Sección titulada «Paso 1: Detener los Demonios de Comunicación Colectiva»
Ventana de terminal
systemctl stop pve-cluster
systemctl stop corosync

Шаг 2: Монтирование файловой системы в локальном режиме (с возможностью записи)

Sección titulada «Paso 2: Montar el Sistema de Archivos en Modo Local (Read-Write)»

Файловая система /etc/pve блокируется в режиме только для чтения, если нет сети-кворума. Чтобы изменить это локально:

Ventana de terminal
pmxcfs -l

Шаг 3: Очистка конфигурации кластера

Sección titulada «Paso 3: Limpiar la Configuración de Clúster»
Ventana de terminal
rm -f /etc/pve/corosync.conf
rm -rf /etc/corosync/*

Шаг 4: Закрытие режима обслуживания и активация стандартного режима

Sección titulada «Paso 4: Cierre del Modo Mantenimiento y Activación Estándar»
Ventana de terminal
killall pmxcfs
systemctl start pve-cluster

4. Решение критических ошибок (устранение неполадок)

Sección titulada «4. Resolución de Errores Críticos (Troubleshooting)»

Ошибка 1: Cluster not ready - No Quorum

Sección titulada «Error 1: Cluster not ready - No Quorum»
  • Симптом: Все виртуальные машины отображают иконки с серыми вопросами и не могут быть отредактированы или запущены.
  • Причина: Узел потерял связь с остальным кластером Corosync и блокирует запись метаданных, чтобы избежать логических коллизий.
  • Обходной путь (1 максимальный голос):
    Ventana de terminal
    pvecm expected 1

Ошибка 2: Permission Denied при удалении папок узлов с корнем

Sección titulada «Error 2: Permission Denied al Borrar Carpetas de Nodos con Root»
  • Симптом: Вы пытаетесь удалить фантомный узел с rm -rf /etc/pve/nodes/antiguo и система отказывает в операции на уровне ядра.
  • Причина: Потеря кворума, блокирующая основу кластера pmxcfs в режиме только для чтения.
  • Решение: Выполните последовательность локальной сборки:
    Ventana de terminal
    systemctl stop pve-cluster
    pmxcfs -l
    rm -rf /etc/pve/nodes/antiguo
    killall pmxcfs
    systemctl start pve-cluster

5. Руководство по развертыванию: гибридная печать с Universal Print

Sección titulada «5. Manual de Despliegue: Impresión Híbrida con Universal Print»

Этот случай исследования подробно описывает архитектуру интеграции промежуточной печатной шлюзы в Windows Server Core, работающей под Proxmox VE, для подключения локальных физических принтеров к сервису SaaS Universal Print от Microsoft 365.

5.1. Топология лабораторії друку

Sección titulada «5.1. Topología del Laboratorio de Impresión»
[💻 Cliente Windows 11] ───► [☁️ Universal Print] ───► [🔌 Conector (VM Core)]
(PT-PORTEL-ADMIN) (Microsoft 365) (w-server-2022)
│ │
▼ ▼
(Gestión Remota MMC) ────────────────────────────────► [🖨️ Impresoras Red]
  • Хост гипервизора: узел Proxmox VE с хранилищем SSD.
  • Сервер-шлюз (гостевой ВМ): Windows Server 2022 Core (минимальная сетевая установка).
    • Логический IP-адрес сервера: 192.168.10.22
    • Имя хоста: w-server-2022
  • ПК клиента управления: Windows 11 (PT-PORTEL-ADMIN) в локальной подсети управления, аутентифицированный в Microsoft Entra ID (AzureAD\PortelAdmin).
    • IP-адрес администратора: 192.168.10.164

5.2. Фаза 1: Вирішення проблем під час розгортання VM Windows Server Core

Sección titulada «5.2. Fase 1: Solución de Problemas en el Despliegue de la VM Windows Server Core»

Завантаження драйверів VirtIO під час встановлення

Sección titulada «Carga de Controladores VirtIO en la Instalación»

Під час початку встановлення Windows Server Core на Proxmox не відобразиться жодного фізичного диска призначення через відсутність драйверів Windows для SCSI-контролерів, оптимізованих для віртуалізованого середовища.

  • Разрешение:
    1. Обеспечьте, что образ virtio-win.iso смонтирован в виртуальной консоли CD Proxmox.
    2. Нажмите Загрузить драйвер в установщике Windows.
    3. Выберите физический путь: D:\viostor\2k22\amd64.
    4. Если диск отображается неактивным в терминале установки, откройте консоль с помощью Shift + F10 и активируйте его с помощью Diskpart:
      Ventana de terminal
      diskpart
      select disk 0
      attributes disk clear readonly
      online disk
      exit

Налаштування адаптера мережі VirtIO (NetKVM)

Sección titulada «Configuración del Adaptador de Red VirtIO (NetKVM)»

Поскольку минимальный интерфейс Windows Core не имеет классической графической консоли (devmgmt.msc), драйверы виртуальной сетевой карты должны быть подготовлены с помощью команд PowerShell:

Ventana de terminal
pnputil /add-driver "D:\NetKVM\2k22\amd64\netkvm.inf" /install

После загрузки драйвера NetKVM запустите базовый административный инструмент sconfig, чтобы назначить постоянный статический IP-адрес в подсети лабораторных серверов.


5.3. Фаза 2: Розширена конфігурація віддаленої адміністрації (CredSSP і UAC)

Sección titulada «5.3. Fase 2: Configuración Avanzada de Administración Remota (CredSSP y UAC)»

Поскольку наша лаборатория находится в изолированной рабочей группе (без локального активного каталога) и клиентский ПК интегрирован в Entra ID cloud (AzureAD\PortelAdmin), обязательным является включение CredSSP и делегирование разрешений удаленного доступа для того, чтобы инструмент RSAT Windows 11 мог управлять подсистемой печати сервера Core удаленно.

Крок 1: Змінити профіль мережі сервера Core на Приватний

Sección titulada «Paso 1: Cambiar el Perfil de Red del Servidor Core a Privado»

Якщо мережевий адаптер Windows Server Core налаштовано з категорією 'Публічний', брандмауер заблокує всі підключення віддаленого керування на основі DCOM/WMI:

Ventana de terminal
# Identificar el InterfaceIndex del adaptador
Get-NetConnectionProfile
# Reemplazar el número de índice por el correcto obtenido (ejemplo: index 12)
Set-NetConnectionProfile -InterfaceIndex 12 -NetworkCategory Private

Крок 2: Налаштувати TrustedHosts на клієнтському ПК адміністратора

Sección titulada «Paso 2: Configurar TrustedHosts en el PC Cliente Administrador»

В повышенной консоли PowerShell вашей машины Windows 11 для управления (PT-PORTEL-ADMIN), добавьте целевой сервер в список доверенных хостов WinRM:

Ventana de terminal
winrm set winrm/config/client '@{TrustedHosts="w-server-2022,192.168.10.22"}'

Крок 3: Налаштувати делегування облікових даних CredSSP

Sección titulada «Paso 3: Configurar Delegación de Credenciales CredSSP»

Щоб уповноважити безпечну передачу мережевих паролів під час забезпечення черг друку з подвійним стрибком:

  • На клиенте Windows 11:
    Ventana de terminal
    Enable-WSManCredSSP -Role Client -DelegateComputer "w-server-2022"
  • На сервере печати Core:
    Ventana de terminal
    Enable-WSManCredSSP -Role Server

Крок 4: Відключити локальне блокування віддаленого UAC (TokenFilterPolicy)

Sección titulada «Paso 4: Deshabilitar el Bloqueo Local de UAC Remoto (TokenFilterPolicy)»

За замовчуванням Windows застосовує сувору політику, яка знижує адміністративні привілегії локальних облікових записів під час підключень віддаленого WMI. Виконайте цю команду на терміналі сервера Windows Server Core, щоб відключити її:

Ventana de terminal
New-ItemProperty -Name LocalAccountTokenFilterPolicy -Path "HKLM:\SOFTWARE\Microsoft\Windows\CurrentVersion\Policies\System" -Value 1 -PropertyType DWord -Force

Крок 5: Встановити роль служби друку на Core

Sección titulada «Paso 5: Instalar el Rol de Servicios de Impresión en Core»

Підключення універсального друку вимагає, щоб базова інфраструктура черг друку була встановлена на цільовому вузлі:

Ventana de terminal
Install-WindowsFeature Print-Services -IncludeManagementTools

5.4. Фаза 3: Віддалене підключення та експрес-дублювання принтерів (Point and Print)

Sección titulada «5.4. Fase 3: Conexión Remota y Duplicación Expresar de Impresoras (Point and Print)»

Розблокування політик встановлення драйверів сторонніх виробників

Sección titulada «Desbloqueo de Directivas de Instalación de Drivers de Terceros»

Щоб дозволити імпорт і встановлення драйверів Ricoh або Zebra віддалено на VM без необхідності присутності для підтвердження UAC:

Ventana de terminal
$regPath = "HKLM:\SOFTWARE\Policies\Microsoft\Windows NT\Printers\PointAndPrint"
if (-not (Test-Path $regPath)) { New-Item -Path $regPath -Force }
Set-ItemProperty -Path $regPath -Name "Restricted" -Value 0 -Type DWord -Force
Set-ItemProperty -Path $regPath -Name "NoWarningNoElevationOnInstall" -Value 1 -Type DWord -Force

Безпечне виконання консолі адміністрації (MMC)

Sección titulada «Ejecución Segura de la Consola de Administración (MMC)»

Из-за повторяющейся ошибки Windows при управлении удаленными сетевыми аутентификациями с клиентов, присоединенных к Azure AD, к автономным серверам, вам необходимо инициализировать удаленную консоль администрирования печати (printmanagement.msc) путем принудительного определения области учетных данных сервера с помощью команды runas /netonly:

Ventana de terminal
# Ejecuta en el CMD de tu PC de administración (PT-PORTEL-ADMIN)
runas /netonly /user:w-server-2022\Administrador "mmc printmanagement.msc"

Эта команда запустит консоль удаленного управления Windows 11 с использованием вашей локальной идентичности, но связь в подсети с VM w-server-2022 будет авторизована неявно с административной ролью сервера, позволяя добавлять принтеры и TCP-порты прозрачно.

Міграція та масове завантаження принтерів

Sección titulada «Migración y Carga de Impresoras por Volumen»

Замість додавання 10 мережевих принтерів по одному на сервер Core:

  1. Экспорт: В открытой графической консоли MMC с помощью предыдущей команды нажмите правой кнопкой мыши на узел локального административного компьютера (PT-PORTEL-ADMIN) и выберите Экспортировать принтеры в файл….
  2. Импорт: В том же консольном дереве щелкните правой кнопкой мыши на удаленном сервере (w-server-2022) и выберите Импортировать принтеры из файла..., загрузив файл .printerExport для миграции 10 портов, конфигураций и драйверов менее чем за минуту.

5.5. Фаза 4: Остаточна реєстрація в універсальному друці

Sección titulada «5.5. Fase 4: Registro Final en Universal Print»

Після налаштування локальних черг на віртуальному сервері відкрийте віддалене підключення PowerShell до сервера Core і виконайте підключення для реєстрації ресурсів друку в хмарі під вашим організаційним обліком Microsoft 365:

Ventana de terminal
# Instalación del paquete del conector en modo desatendido
C:\Deploy\UniversalPrintConnector.exe /quiet ACCEPT_EULA=Y AUTH_CODE="CODIGO_REGISTRO_ENTRA_ID"

⚡ Контрольний список операцій із віртуалізацією

Sección titulada «⚡ Checklist de Operación en Virtualización»
  • ✓ Quórum Garantizado: Servidores de clúster Proxmox resolviendo comunicaciones y enrutando almacenamiento de forma redundante.
  • ✓ Seguridad Híbrida: Enlaces remotos WinRM asegurados bajo CredSSP y UAC filtrado para administración de impresión.
  • ✓ Cuentas Limpias: Identidades y credenciales de red simuladas en consonancia con la arquitectura lógica de laboratorio de Portelcore.